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. 逆 矩 阵 的 基本 理赔; 逢 3 章 普 生 讨论 广义 逆 和 矩阵 的 连续 性 问题 
以 及 消除 亏 秩 矩阵 广义 送 的 不 连续 性 的 理论 和 方法 ; 第 4 章 则 
对 奇异 性 和 病态 性 这 两 个 重要 概念 以 及 对 度量 病态 程度 的 有 效 
方法 作 了 比较 系统 的 介绍 第 5 AMATE NEENA 
性 最 小 二 乘 问题 的 数值 方法 , 如 LU 分 解 ,QB、 QU 分 解 以 及 直 
交 化 方法 和 递 推 方法 等 ， 章 末 还 对 有 特殊 结构 的 大 型 稀疏 线 伺 
最 小 二 乘 问题 的 计算 方法 作 了 简要 介绍 。 此 外 , 在 附录 里 对 
Drazin 逆 和 矩阵 的 基本 理论 也 作 了 简单 的 介绍 。 
本 书 可 供 大 学 理 、 工 科 高 年 级 学 生 、 研 究 生 、 教 师 以 及 具 
有 初步 线性 代数 基础 的 工程 技术 人 员 参 考 。 
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< 计算 数学 丛书 ?是 为 了 适应 计算 涩 学 和 计算 机 科学 的 发 
展 ， 配 合 高 等 院 校 的 计算 煞 学 元 学 的 需 间 而 组 织 的 一 套 参 考 
读物 。 恋 者 对 和 象 主要 是 高 等 院 校 数学 系 和 计算 机 科学 系 的 学 
生 、 研 究 生 , 亦 可 供 高 等 院 校 数学 系 和 计算 机 科学 系 的 教师 以 
及 工矿 企业 、 科 研 单 位 从 事 计 算 工 作 的 技术 人 员 和 参考 。 

本 从 书 向 读者 介绍 近代 计算 方法 的 一 些 主要 进展 及 其 适 
用 范围 和 实用 效果 。 每 种 书 集中 介绍 一 个 专题 ， 针 对 本 专题 
的 近代 发 展 作 综 合 性 的 介绍 ,内 容 简 明 扼要 ， 重点 突出 ， 有 分 
析 , 有 评价 ,力图 使 读 者 对 该 专题 的 动向 各 发展 趋势 得 到 一 个 
完整 的 了 解 。 

本 丛书 已 拟定 的 选 题 计 有 : 《线性 代数 与 多 项 式 的 快速 算 
ik». «d ib deo d E XEXE K> E PE E fic] E < 1 
列 夫 空间 引 论 >、< 计 算 组 合 数 学 >、< 样 条 与 插值 >、< 不 动 点 算 
法 >、< 广 义 道 矩阵 的 基本 理论 和 计算 方法 > .< 韭 线性 方程 的 区 
间 算 法 > 奇异 摄 动 中 的 边界 层 校正 法 > 、“ 沃 尔 什 函 数理 论 与 
应 用 ?多项式 最 住 逼近 的 实现 >.% 曲 线 曲 面 的 数值 表示 和 狐 逼 
近 >、< 含 入 误差 分 析 引 论 >、<《 解 边 值 问题 的 伽 辽 金 法 >、《 非 线 
性 方程 组 送 代 解法 ><、< 外 推 法 及 其 应 用 、< 蒙 特 卡 罗 方 法 >、 
«演化 方程 的 有 限 元 理论 >、< 数 值 解 高 维 偏 微分 方程 的 分 列 
法 > 等 二 十 余 科 , 干 一 九 八 O 年 初 起 陆续 出 版 。 
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早 在 二 十 年 代 初 期 ，E. H. Moore 就 提出 了 广义 着 矩阵 
这 个 重要 概念 . 在 三 十 年 代 , 曾 远 荣 先生 把 它 推广 到 Hilbert 
空间 中 的 线性 算 子 上 去 , 以 后 他 又 作 了 一 系列 有 意义 的 工作 . 
但 是 ， 长 期 以 来 ， 对 广义 道 矩 阵 的 研究 却 没有 受到 人 们 的 注 
意 ， 随 着 科学 技术 的 发 展 , 直到 五 十 年 代 中 期 ,R. Penrose 又 
Air HERE UT XU PERDER , 情况 才 开 始 发 生 了 变化 ,这 
被 人 们 称 之 为 广义 逆 失 阵 的 再 生 ， 这 是 历史 的 必然 。 由 于 广 
义 逆 矩 阵 在 测量 学 、 统 计 学 、 经 济 学 以 及 数学 规划 等 许多 领域 
中 的 重要 应 月 束 渐 为 人 们 所 认识 ， 从 而 对 广义 道 矩阵 的 理论 
与 应 用 的 研究 , 产生 了 巨大 的 推动 力量 ,使 得 这 一 学 科 在 近 三 
十 年 来 得 到 迅速 的 发 展 ， 现在 , 广义 道 短 阵 的 理论 已 成 为 线 
性 代数 中 的 一 个 重要 方面 ， 它 是 处 理 线性 数学 模型 的 -种 有 
力 工具 ， 在 计算 数学 中 ,特别 由 于 它 具有 处 理 奇异 性 问题 的 
能 力 , 也 日 益 显 示 出 不 可 忽视 的 作用 ，- 

本 书 的 目的 是 向 读者 介绍 广义 逆 甜 阵 的 基本 理论 以 及 计 
移 广 义 道 怎 阵 和 有 关 线 性 最 小 二 乘 问题 的 数值 方法 ， 全 书 其 
分 五 章 , 各 章 要 点 如 下 ， | 

第 工 章 是 预备 知识 ， 主 要 介绍 有 限 维 向 量 空间 及 定义 在 
其 上 的 线性 算 子 的 基本 理论 ， 空 间 的 直接 和 分 解 及 由 此 确定 
的 投影 算 耶 为 讨论 广义 道 算 子 所 必需 .最 后 介绍 了 线性 算 子 
的 矩阵 表示 , 从 而 阐明 了 线性 算 了 于 和 和 矩阵 之 间 的 关系 . 

第 2 章 介绍 了 广义 道 甜 阵 的 算 子 理论 ， 以 空间 分 解 为 基 
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Ti, A T SOGEGYT W FERE X 36 T ERRE E 
Wi. XAÉRIDOXORSET REER, 建立 了 广义 逆 窍 阵 的 相应 
理论 ， 

第 3 章 的 内 容 是 广义 闭 年 阵 的 摄 动 理论 ， 讨 论 了 摄 动 对 
广义 逆 和 矩阵 的 影响 , 其 目的 是 研究 广义 道 和 矩阵 的 连续 性 问题 . 
本 章 证 明了 气 秩 竹 阵 广义 道 的 不 连续 性 可 以 用 人 为 的 方法 加 
以 消除 , 从 年 对 广义 道 怎 中 的 计算 提供 了 必要 的 理论 基础 ,最 
后 还 讨论 了 摄 动 对 景 小 二 乘 问题 的 解 的 影响 ， 

第 4 章 的 目的 之 一 是 六 明 问题 的 奇异 性 和 病态 性 这 两 个 
重要 概念 及 其 区 别 。 另 一 目的 是 建立 判断 问题 病态 程度 的 理 
论 和 方法 ， 为 此 , 本 章 对 向 量 系 的 线性 相关 性 理论 作 了 定量 
研究 ， 在 此 基础 上 讨论 了 问题 的 病态 程度 和 相关 性 指标 的 关 
系 ， 并 提出 了 估计 病态 程度 的 拟 条 件数 概念 以 及 切实 可 行 的 
计算 方法 . 

第 5 章 的 内 容 是 计算 广义 逆 和 矩阵 和 相应 线性 最 小 二 乘 间 
题 的 计算 方法 .其 中 包括 LU 分 解 ,QR 和 QU 分 解 , QR-LLT 
AT, 以 及 直 交 化 方法 和 北 推 方法 等 。 最 后 还 介绍 了 解 大 型 
稀 政 线性 最 小 二 乘 间 题 的 计算 方法 ， 

鉴于 Drazin 递 抱 阵 在 奇异 线性 常 微分 方程 组 以 及 奇异 
线性 差分 方程 组 等 方面 有 重要 应 用 , 在 附录 里 介绍 了 Drazin 
逆 的 基本 理论 . 

罗 亮 生 间 志 带 助 绘制 全 书 附 图 , 赵 金 申 同 志 代 为 眷 写 , 特 
别 是 孙 锯 平 同志 阅读 了 全 稿 并 提出 了 一 些 有 益 的 建设 ， 作 者 
说 向 他 们 表示 衷心 的 感谢 ! ë 
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N MCA), 21 CAD 3225385 2 TEE PS 22 8 ERI 
dim Y^ 3e pj B£ “ë [ET 328 
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EAER 4 BEAR PESE 


es 
-— jjj — 


[ES 

符号 说 明 

第 工 章 ”线性 空间 和 线性 算 子 pp 1 
£1 线性 商量 空间 eeeeeeeeeeeeenee] MIHI i 
$2 子 空间 和 空间 的 分 解 eeeÉee9——9——M n! eem 8 
$3 KRESE] eene mne 12 
$4 线性 算 子 及 其 矩阵 表示 ""—————————————— 15 
$5 酝 空 间 上 的 线性 算 子 ata EE es 26 
$6 INEB-IEESHESmWeeee6€—-—— D 33 
&7 向 量 和 算 子 的 范 数 Tt 41 

$92 rx3sestpcTSibeeeeeMMMMMMMReÜeemÁM 4T 
$1 ZEMETJOGUDRÉENSE eeeeeeeseeeseeeee] em AT 
$2 相 容 方程 求解 问题 和 相应 的 广义 道 算 子 A eee 48 
$3 相 容 方程 的 极 小 范 数 解 和 广义 遂 算 子 Anceeeem653 
§ 4 子 盾 方程 的 最 小 二 乘 解 和 广义 道 算 节 AD eene 
§5 矛盾 方程 的 极 小 最 小 二 乘 解 和 广义 北 算 子 AT eee 62 
$6 JXGU B YUUBEREReee me emen 70 
$7. — ibik k Moore-Penrose ^X E eH 77 

第 8 章 P AUER EER EE 80 
$1 JkEENESMEMEIS HIDE See 80 
$2 Banach 引 理 和 韭 奇异 方 阵 REE HERREN 99 
823 MAER X huy ap) JE] B od 
$4， 亏 秩 矩阵 广义 送 的 连续 性 问题 … LE 95 
$5 亏 秩 矩阵 的 保 秩 变 形 和 广 SLEEK 不 连续 性 的 消除 Ue 101 


$6 最 小 二 乘 问题 的 摄 动 定理 eeeeeeeeeeeeeeeeeee 105 
第 4 章 病态 问题 和 病 访 程度 的 度量 een 109 
$1 病态 问题 和 算法 的 数值 稳定 性 eee 109 
B20 tps: Qcssaasssassasussnnsssss 123 
§ 3” 汁 算 相 关 性 指标 的 方法 eH 133 
84 1BEEWUSL RUE. de PUB HH 138. 
第 5 章 T AEE ERA PERRE TERIS ER “144. 
81 计算 广义 道 矩阵 的 基本 原则 “ ME ol 
$2 Glanss yM Rh eee eene eet rne 145 
83 QR RQU IA Em 152 
$4 TG eene enne ne nnno een rt 164 
85 HAT OOREEN RRB bh …………108 
56 大 型 稀 琉 线性 最 小 二 乘 问 题 的 计算 方法 eeeeeeeeee 175 
HE 方 阵 的 Drasin p asss ss 381 
附录 3 XHUXXGERUAGREBBERBRRAD eeeeeee — 199 
D| 9 204 


2913s 


、 线性 空间 和 线性 算 子 


$1 线性 向 量 空间 


1-1 线性 向 量 空间 的 定义 

设 Z 为 某 一 集合 , 其 元 素 e, y, 2?,… 等 叫做 向 量 ， 在 
Y 的 元 素 之 间 ， 定 义 有 加 法 运算 , 记 作 “十 ”， 这 种 加 法 运算 
具有 下 列 性 质 . 

1) Z IBEX T Bri z A y 都 可 以 相 加 ， 其 和 仍 为 
YY 中 的 一 个 向 量 z, 记 作 

化 十 2 一 2， 

这 就 是 说 , 集合 少 对 加 法 运算 是 封闭 的 ; | 

2) 加 法 运算 服从 交换 律 和 结合 律 ， 即 对 Z 中 任意 的 向 
ic, y, z, JE 

wT 一 YY 十 XX， 交 换 律 ， 
(e--y)tz—-m-t(ycz), 结合 律 ; 

3) YY 中 有 唯一 的 元 素 0, 称 为 零 元 素 或 零 向 量 , 它 具有 

性 质 ; 对 任意 的 向 量 xwE€ 7^ (Bl x Jë + Y^), 
æ +0=0 +w =x; 

4) 对 任意 的 向 量 CY, 总 存在 一 个 向 量 y, 它 具 有 性 
ES | w+y=0, 
我 们 称 2 为 w 的 逆 元 素 , E t= — m. 

其 次 , 我 们 设 不 是 一 个 给 定 的 数 域 , 例如 复数 域 或 实数 
RAEC RA), 其 中 的 数 记 作 a 8, y, n 正中 的 
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数 a 和 当中 的 向 量 w 之 间 定 义 有 乘法 ， 记 作 ox, 它 也 是 Y^ 
中 的 一 个 向 量 ， 这 种 运算 满足 下 列 规 律 . 

对 任意 的 数 a, BEK, 和 任意 的 向 量 w, YE 7^, TH d. 

5) a(Ba) (m8)w， 结合 律 ; 

6) (a+ f)x=aæ + 8x, 对 于 数 的 分 配 律 ; 

T) a(z-d-gU)-ax-ray, 对 于 向 量 的 分 配 律 ，; 

(85) ix=r, 

定义 1 具有 上 述 性 质 1)~8) 的 集合 YO, RARE 上 
的 线性 向 量 空间 ,或 简称 之 为 向 量 空间 . 

例 1 关于 变 元 1 的 一 切 不 高 于 m1 次 的 实 系数 (或 复 
系数 ) 多 项 式 

Palt) = ao 0 l-i a4 179 4----- au 4 

所 组 成 的 集合 ， 按 通常 的 意义 进行 多 项 式 和 数 的 乘法 以 及 多 
项 式 的 加 法 运算 ， 则 此 集合 便 是 一 个 实 (或 复 ) 数 域 上 的 向 量 
空间 , 记 作 Pr, 

512. 一 切 n 元 有 序 的 实 (或 复 ) 数 组 

(zi, wa, y my) 

所 组 成 的 集合 n, 车 规定 相应 的 “加 法 ”和 “乘法 ” 运算 为， 

(ci，…， 人 et Yn) = Ct e, Batya), 

a(24, ***, ma) = (Gi, 0, aa), 

这 种 集合 便 构 成 实 (或 复 ) 数 域 上 的 向 量 空 空间 ， 常 记 伯 "Gk 
«e. 

例 3 EREEREER o, 按 通 常 的 意义 规 
定 * 加 法 ”和 “乘法 ”运算 ， 所 组 成 的 集合 也 是 相应 数 域 上 的 罕 
RM. 对 于 这 种 情形 , 应 补充 规定 : 车 Dim 一 mg Ju 

二 序列 e) (y) Adae. 

1-9 .向 量 系 的 线性 相关 性 
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设 Y 是 定义 在 数 域 CREER, mc “Wn 为 其 
Pn DER. 我 们 有 | MEL 
EX? 著 存 在 不 全 为 零 的 数 GEK, i=l, =, n, 使 等 
sÉ 0394 - 5 Fat, = Ü 
成 立 , 便 称 向 量 系 {2 e, md 为 线性 相关 , S 否则 的 请 , 便 称 
之 为 线性 独立 或 线性 无 关 . Ux 
应 当 指 出 ， MERI eC rani 
92-0, 
因为 我 们 总 有 
lz--0z-(1c-0m-zc, 
今 将 有 关 线 性 相关 向 量 系 的 一 些 简单 事实 列举 于 下 : 
1° 车 向 量 系 (xu, m. 中 有 一 个 为 堆 向 量 ， 则 此 疝 
基 系 必 为 线性 相关 , 反之 则 不 然 。 
2° 车 向 量 系 中 有 一 个 向 量 , 例如 设 其 为 ws， 可 以 表示 
成 其 余 疝 量 wj,…, ci 的 线性 组 合 , 即 
` 8,-04344- 7 3-04 4284 1, 
则 回 量 系 必 为 线性 相关 , 因为 显然 有 
03905 d- 75-04 400, iar 一 0， 
其 中 a,= i0, i I 
3° dim. e, wn} 为 线性 相关 ， 则 其 中 至 少 有 一 个 韶 
景 可 以 表示 成 其 余 向 量 的 线性 组 合 ， 
4° BEES (uy s, m) 的 某 一 个 子 集 , 例如, 可 设 其 
A2 imc md rn, 为 线性 相关 ， MS 
相关 ， . 
1-3 向 量 空间 的 基底 和 维 数 : | 
为 了 给 出 向 量 空间 前 表示 ， 我 们 先 引进 空 ERETTE 
要 概念 。 | 


定义 3， 设 (ma, oo, we} HARRE 域 上 的 ) Z h 
的 一 个 线性 独立 系 ， 如 果 空 间 中 的 任何 向 量 x 都 可 以 表示 成 
2, 5, Wn 的 线性 组 合 , 即 , 存在 数 CE, ¿=1, 0e, n, E 
E 039, T 0408, (D 
BUSH (un, cu, m) 构成 空间 Z ATER. 
定理 1 设 la, …， m.) 构成 空间 Y^ Bj — 358, WJ # 
PARQE.. E 
证 明 Retz- .个 表达 式 
X= PINa + "Bres, f (2) 
DH Q 489848 
. (o4 — Ba) Ætt (o4 — B,)m,=0, 
因为 向 量 系 eme e ES) 为 线性 独立 , 所 以 必 有 
—;—0, $21, -,n, 
Bl o, 7- B, $—1, v, 这 就 证 明了 表达 式 C) BERE DEL 证 毕 
进 一 步 我 们 还 有 
定理 2 设 疝 量 系 (Qu, =, Ws} 和 t. …, gn} 都 是 向 
量 空间 久 的 基底 ,其 中 % 和 mw 是 两 个 自然 数 , 则 必 有 m==n. 
证 明 fom». 因为 {z c+, Wn} 是 六 的 一 个 基 
底 , 所 以 每 一 个 9;, i=l, cs, m 都 可 以 表示 成 它们 的 线性 组 


全 
Uic Qi Qi: Lamay d ` qa, 
Va = 012901 + 623889 T t Ge, 
earns (8) 
Voc 0483717 mT t e n I, 
今 证 明 必 存在 不 全 为 零 的 数 o, n, ons 使 
S Qhi aos do -Ann 0. (4) 
为 此 ,我 们 把 g, 的 表达 式 (8) PL (4) 8453]. | 
m 


"4 


1 A Bera 


(aya 4-045055 d- *:: + Giao.) 3. 
-1 (03304 Hado t t + Comin) Wa 
«2 (am Hanat 77 E aman) Ea =À; 
Ae (¿= 1, =, 号 的 系数 为 零 ， 多 得 到 于 次 生性 程 组 
4434 taig Heee + Aimam = 0, 


03104 + ag F ° ° * + Bomam == O, 


ee 


30 + Gaps - *- raum, ` I 
这 是 一 个 亚 定 方程 组 /如 方程 个 数 少 于 未 知 量 .om 的 个 
数 , 所 以 必 有 非 堆 解 这 就 是 说 , 存在 有 不 全 为 零 揭 数 mr，…， 
am BED FL, BG RENI, Yast, Ya 必 为 线性 相关 , 因此 必 有 


m =m, 
交换 mH y, 可 证 n< m, TEBA | 
m, =m. ü w, 


向 量 空间 的 基底 不 是 唯一 的 , 但 是 ， 任何 基底 中 的 向 量 个 
数列 ius. 于 是 我 们 有 ， 
定义 & 向 量 空间 ydus (zu, ==, a 2), MB 
规定 空间 S RER n, 记 作 
dim ym, 

车 不 存在 有 限 基底 , 则 称 相应 空间 的 维 数 为 无 穷 ， 

例如 , 在 多 项 式 空间 2, rh, 1, d, nne, 加 工 便 构成 一 个 基 
E, BEN 


Pus D 
Xl, G, 0, =, 0), (6; 0), =+, (0, - DA 
A n FERE, EER » "om xk HH 
dim £m, 
又 例如 , 前 面 所 讲 的 收敛 数列 空 PRIN Im 
本 书 只 考虑 有 限 维 的 情形 . | f 


14 向 量 空间 的 表示 . 
我 们 首先 考虑 空间 六 的 基底 存在 性 问题 ， 设 Er 
PAARE, # Z REER E oo 都 可 以 表示 成 
=a 004 
的 形式 ， 则 £ 便 是 六 前 一 个 基底 这 时 
. dim Y=1, 
不 然 的 话 ， 即 存在 非 夫 向 量 Xə, 它 不 能 下 示 成 上 述 形式 ， 但 
" 如 果 Z 中 的 任何 向 量 多 都 可 以 表示 成 wi 和 Wo 的 线性 
合 , 即 
& =AL] 1-05 Xə, 
则 (2, æ} dip ^W — ADIE, 这 时 空间 的 维 数 为 2, fj 
则 的 话 , 必 存 在 非 零 向 量 wa， 它 不 能 表示 成 上 述 形式 ， 如 此 等 
等 ， 最 后 必 有 下 列 两 种 情形 之 一 发 生 ， 
”1 存在 有 限 个 向 量 ay, e, ws。， 它 们 构成 六 的 一 个 基 
底 , 这 时 I ` dim Y=n, f 
2) 不 存在 有 限 基底 , 这 时 空间 v^ 是 无 限 维 的 。 
现在 我 们 粮 定 
° dim Y=%, 
是 一 个 自然 数 ,这 时 存在 基底 
Qu, t, Ep, 
Bæ 多 中 的 任 一 向 量 , VU z DA EE Rh t Ova, ny m, 
的 线性 组 合 ， 即 存在 唯一 的 一 组 数 £3, £s, o, En CE 
Gm HEW t n Eas, (5) 
ARRIER (En €» c, Ea) 为 向 量 儿 在 基底 (an, eum) 
下 的 表示 ,并 称 £u $—1, 2, …， n Jg Bt oe np iE 
38 0 Bb. 0 0: . f 
这 就 是 说 ， gol T rp (zs, "° *, Ear 以 后 ,我 们 便 


— 6 —. ox oon 
£y A TU ; 
lC U < ali, 


可 以 把 空间 中 的 向 量 表 示 成 % 元 数组 、 这 也 就 是 说 , RHA 
(x4, 7, x.) 作为 基底 ， 在 向 司空 得 Y^ ng. Y — 4 3 $R 
系 ， 这 样 ， 我 们 便 把 % 维 向 量 空间 六 用 一 个 "元 数组 空间 
^ (s& €") X ok `. | 

应 当 注 意 ， 同一 个 向 量 ， 对 于 空间 中 不 同 的 基底 , + ERU 
标 也 不 一 样 . 

， 在 基底 {æ 0, m,y FRIHERRE E, nU -— 
标 向 量 , 也 可 以 称 au, e, 2, 为 这 个 化 标 系 的 坐标 轴 , :向 量 
f, s 4 BA, ER MB PREE»: 

mis (0, 0, 7, O, ‘ws= (0, 1, 0, =, 0), 
HEN æ= (0, 0, =, 1). 
所 以 也 可 以 称 右 端 为 空间 Z 的 单位 到 村 向量 
1-5 ”空间 的 同 构 
根据 上 面 的 讨论 可 以 看 出 ,%* 维 向 量 空间 多， 在 建立 了 
坐标 系 后 便 和 同一 数 域 尺 上 的 元 数组 空间 K" Z |] sË SZ 
了 一 种 对 应 关系 。 这 种 对 应 关系 不 但 是 一 对 一 的 , 而 且 还 保 
持 关于 向 量 运 算 的 线性 性 质 , DE m, y € Z 2034978 K RE 
BJ n 53 ER (£s, £o, "° En), (m, Tja, er, Na) 对 应 : 
qe, “ , £s), 
YCM, t, 08), 
HFa BEK, EA 
a£ -- B ye» (a£id- Bra, t, Ent Enn) 
—-—a(£., n, EE B, tym. ` (6) 
我 们 称 这 种 关系 为 向 基 空 间 V RR Fd OK bn ecce 
空间 K" 之 间 的 园 构 关系 。 在 一 般 情 形 ,我 们 有- | 
定义 5 dvi vs. 3⁄5 K 上 的 向 量 空间 ， 若 
存在 双向 单 信 映 射 全 , 即 , 对 任何 wE Z, XE S TE BS V 
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TRE Yao 并且, 车 an, Wa€ Y^, 035 Qs, WI 
Yi Te. s Tas, 
FH, XM HUE x Bj pg T 3e SEES Hf 即 ， sim 
Ha, BEK, Ti 
; (a G I+ Bas) =a Tert T, 

则 称 向 量 空间 Z; 和 Z AAH. 

很 明 最 ,这 种 园 构 关系 具有 传 褪 性 ,就 是 说 , 若 Y, Pas 
Ys 为 同一 数 域 玉 上 的 向 量 空间 ， 且 已 知 AAM Z FJ Eg; 
Ya 和 Ya 同 构 , MU Z DRE 8 同 构 而 且 还 不 难 证 明 , d 
T3, Yo i, H. dim Y3—n, H| 238 

dim 2 =m, 


El, Hiss RFI sk. 


$2 子 室 间 和 空间 的 分 解 


2-1 子 空间 
m r RARE 上 的 有 限 维 向 量 空 间 ， Sx Y^ MAE 
空子 集 , CONTE EGASTUROS SIEHE, HL 350,9 CS, o, BCK, 
nl axt BYES, 
这 一 类 型 的 子 集 具 有 十 分 重要 的 性 质 ， 
定义 6 具有 上 述 特征 的 子 集 8,， 称 为 向 量 空 间 Y^ NI 
个 子 空 间 ， : 
-例如 , 设 muy muy y mç € TESTER 
010, d- osa d- dre | 
所 构成 的 一 个 集合 S, 便 是 一 个 子 空间 , 如 果 向 量 wy as 
Er 为 线性 独立 ， 则 些 子 空间 的 维 数 为 . 包 
: . dim S=, 


这 就 是 向 量 mu ey a 所 张 成 的 子 空间 , 常 记 作 
Spaníi4l, ~, Trh. 
只 包含 零 向 量 的 子 空 间 , 记 作 O, 其 维 数 定义 为 6 
B| 在 纺 , 中 一 切 次 数 不 高 于 -Uran Bat: 的 多 
项 式 的 全 体 , 构成 一 个 7 维 子 空间 , 1, tes C BUE ART 
空间 的 一 组 基底 , 所 以 , 又 可 以 表示 成 
Spanil, 2, o, P7 5. l oum 
在 di bd :0 的 一 merka 
.. nom Uh Ea) bn 
的 全 体 ， "Du -FRUTA HE 
€,—(1, 0, .…, 0),. “(0, 1, O, = 0) 
es , e,= (0, 0, ., 0, 1), 
则 上 述 子 空间 可 以 表示 为 
Span{ferr 5, ej, 
WER o, as,…, on, 满足 线性 齐 次 方程 
osit Ta, d | = 0 
B — DJ (£x, 7, £0, EÑ I" 的 一 个 子 空间 , RERA a — 1, 
常 称 这 种 子 空间 为 级 * 中 的 一 个 n%- 工 维 超 平面 。 
2-2 子 空间 的 运算 f . 
WS, Sw Y QR K LR) NAT 
空间 ,我 们 用 记号 S n S, 表示 它们 的 交 , 即 共同 部 分 . 这 就 是 
说 ,w € in Ss 的 充分 必要 条 件 为 既 要 妈 EBi, 又 要 CS, dd 
S — S. Ss, (7) 
li] S dos 入 的 一 个 子 空间 ， x 
AN, c, y CS, RUD | 
x, YES, m, y€8., 
iT Sy Sa 都 是 子 空间 , 所 以 ,对 任意 的 m BEK; . 


二 (9 一 


‘at BYES, at-B8UyCH,. ` 
从 而 必 有 有 act4-8y CS, 
BJ, S 也 是 一 个 子 空间 . | 

EH, £ 个子 空 间 83, 85, ee S, 的 交 
S-8,08:fl-- S; 
仍然 是 一 个 子 空间 ， : | 

交 的 概念 可 以 推广 到 无 限 多 个 子 空间 的 情形 . 

给 定向 量 空间 S KWETE M, 包含 它 的 一 切 子 空间 
的 交 , 便 是 包含 . 隶 的 最 小 子 空间 。 例 如 , BE aus e, om 的 
一 切 子 空间 的 交 , 实际 上 就 是 | | 

— Bpaním, ++, a), 
它 是 包含 不 个 给 定向 基 m. e wr 的 最 小 子 空 间 , 

2-9 空间 的 分 解 

对 于 给 定 的 子 空间 Sa S., 记 S 为 包含 它们 的 最 小 子 空 
[a], 则 8 为 一 切 形 如 


u=gz+y, TES:, YES, (8) 
的 向 量 的 全 体 所 构成 的 子 空间 因而 可 以 表示 成 l 
S — 84-4-8,, (9) 


如 果 家 达 式 (8) 是 唯一 -的 ， mj s EROS 8, RI S. 的 直接 和 ， 3t 
Tk 


EE S= 8,@S8., Z - (10) 
若 向 量 空间 表示 成 直接 和 | 
Y= MAC, (41) 


Hop AMAA 38 Z ERA T ERR, 则 它们 为 互补 , BD, A 28 
-人 的 补 空间 , 面 .4 为 - 灰 的 补 空间 .我 们 称 (10? 和 (11) 分 
别 为 子 空间 SMER 的 直接 和 和 分解. 

定理 8 ”直接 和 分 角 (10) 中 的 子 空间 S, 和 53 恰 有 一 个 
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共同 元 素 , 即 零 向 量 . 
证 明 因为 8: 和 Ss 都 是 8 的 子 空间 , 所 以 都 包含 零 同 
景 ,如果 它们 还 有 男 一 一 个 共同 商量 SOUS o, P hi 


VESIN Sa . a T : 
itu-c-ycs,cc68:, WES mu snn... 
U= (2-4-v) + (Yv), SELO 


从 而 u HRARERER—H T, EE o 70, Ene: vod | 
直接 和 分 解 的 例 ” 今 考虑 % 元 数组 空间 2", Doa 


^ I i1, :: Ut £, 0 1 0)}, 
un Ut, 0, £y, M én)}, 
则 =R Se — 


AENARENNM HESTA SHREE, 例如 ， 
p = Span de; OBpan es) O: "GBpanfey], . 
其 中 的 e, JE LAR pr dO AE Qe BE. 
现在 我 们 CERO EORUM (10) TIT TE A 
的 关系 . i 
Bd 设 (10) 为 空 SH 8 的 一 种 直接 和 分 解 , B. 
dim $—m, dim Si = 一 全 ， dim 8 一 人 v 
VIPA] m=fi tTa, Can Sua LO RS 
dimS-dimS,--dimS, —,. , , (12) 
证 明 因为 dim S, =; Br bl S. TRIES au, t, Xs, 
[]38, Sh. 中 存在 基底 qa, n, Ves 根据 直接 和 的 定义 可 知 ， 
{E ro Hi, 便 构 成 空间 5 的 一 个 基底， 所 以 
(42 成立。 证 毕 . uu 


= $t 


ELA KEZ 世间 和 西 空间 


3-1 向 量 的 内 积 

在 向 量 分 析 中 ,向 量 的 数量 积 是 一 个 重要 的 枝 信 ， 现在 
把 它 推广 到 抽象 的 向 量 空间 中 来 : W 六 是 复数 域 & 上 的 向 
HZR, mc, y 为 空间 中 任意 的 向 量 。 MWS, YER Q 
和 2 的 一 个 复 值 函 数 ， 它 具有 下 列 性 质 ， 

1) (Œ, y)=(y, Œ), w5“ —— RTIRA 

2) (aii Haaa, y) =o (21, y) --os (ts, Y), b, 

Xa, Xa, Y € S, 01, aa € EC; . 
8) (z, z)>0, 对 任何 cec, FEAH e — =0 0 时 等 式 成 


x 


首先 可 知 , 因为 关系 1) 成 立 , PDA, (w, a SG ad 
Ji 3) 有 意义 . 
定义 了 我 们 称 具 存 上 述 性 质 的 函数 (mw， EIE æfi 
Y 的 内 积 ， 并 称 
V (z, æ) 
为 向 量 ae 的 范 数 或 长 度 , 记 作 |a |2— (m, z). 
我 们 称 定义 有 上 述 内 积 和 向 量 范 数 的 向 量 空间 是 一 个 丁 
空间 (Unitary Space), 
对 于 定义 在 实数 域 A 上 的 向 量 空间 , 可 仿 前 定义 内 积 奶 
T. Ge YAAR e Hy HRERS, CRA FINER: 
. dy (m, y)=(y, Œ), oM EE: 
e 2) (aii oa, Y) — a, wi; 9) taa(wa, Y), PETE JE; 
8) (æ, x) 20, RA c =0 时 等 号 才 成 立 , 这 是 内 积 的 非 


F] Bl ae B qe LU BUE 79 


lej = (æ, 2). o0 2238 
定义 有 上 述 内 积 和 向 量 范 数 的 实 向 量 空间 ， 称 之 为 欧 氏 
空间 (Euclidean Space), ©, l: . M 00 if kuy 


FARMA n ANAME e, semema m 


5 uad 
|9-2 直 交 性 和 Gram-Schmidt ERRE 

在 空间 中 引进 了 内 积 ， 家 可 以 进一步 引进 直 交 性 这 个 重 
EEST. Semy saz 2 e CRUCE 2") ds ij 
向量 ,我们 有 

定义 8 im, y)-0, BEREIT, 并 记 作 

- e l. NO 

显然 , 直 交 性 是 相互 的 ， FS, t (w, y) =0, w 


(y, v) zj- (a, y)-0, 
从 而 必 有 (y, m)-0, — 
容易 看 出 ， 零 向 量 和 任何 向 量 都 直 交 . . 
定理 5 dian, xy 是 空间 2" (或 a"yibiti 4 ES 
EZK, BE, #0, (Œ, w) —0, X itj, i j=1, 2, 5, k, 
则 它们 必 为 线性 独立 。 MEM 
这 就 是 说 , 非 零 直 交 系 必 为 线性 独立 系 ， . 
WEBB 假定 存在 有 线性 关系 MEN 
04401 4- **: 55,803, = 0, I I 


如 对 任何 2 必 有 , 
0 = (= X, z;) =>; a,(@,, Wi) =U Ej, mO), 


因为 2; 关 所 以 (wj, zj)>0, 从 而 必 有 00000 007 
a, 20, ` j71, wa £, dol 0 et Ny Ip 


这 就 证 明了 向 量 系 t, e, wy 是 线性 独立 的 .， 证 经 

定义 9 imi o, m; R v" TN 28, t 

mel bl -,R,. 77 

则 称 向 量 系 eu, cs, wy 为 V" 中 的 一 个 标准 相交 系 ， 

-更 厢 我 们 进 一 步 考虑 空间 Er PREES A 的 存在 性 ， 
从 而 为 在 空间 中 建立 标准 直 交 基底 打下 基础 ， 

定理 G- ERN O KURERER ue ,sy BD, 
(mom KA Bas io , E 
"6 = K - i, j—1, d.n n, : 9) 
我 们 称 ds 为 Kzonecker delia. | 

证 明 ”我 们 用 一 种 构造 性 方法 来 证 明 标准 直 交 系 的 存在 


. 


B. | . | 
因为 dim qon, 所以 必 存在 基底 

Yi, Us, ee, Ya. i | 
现在 我 们 用 这 些 y: 的 线性 组 合 米 建立 标准 直 交 系 (03. 
HT w= s/ lvl. 
TR [z] = 1, 

HERBE iphuy RC Z 
o Ta, €, c5, Xr, 

dx, e Yj ERES J=1, 2, r, 
今 确定 w, 如 下 ， | 


令 


Uu Vrai (Gigi piara), (14) 
确定 系数 oc, Oy. Uy or 使 B 


(u, a) - (yea ae, =, )=0, i=1, 2, who T, 
根据 Xs, 05, 2, 之 间 的 直 交 性 ;这 个 方程 可 简化 为 


(gras, &,)-—a; =0, 
a= (Ursi, €, )=1, Uu Y, (15) 
I] i wr HEAR ASE gu E, 因为 不 然 的 话 ， 93, 77, S, Yr E 
为 线性 相关 , 从 而 Yo nns Yr 也 为 线性 相关 ， 


令 


2.47 u/ | u p» (16) 
于 是 便 求 得 了 maa. SERERE, 最 后 便 得 到 标 中 交 天 
Bi, a, ey Bar a 
定理 中 所 用 的 方法 , 便 是 著名 的 Gram-Sehmidt 直 交 化 
方法 . l 


由 上 述 方法 得 到 的 直 交 系 ma, Xa, e 7， 因为 是 线性 
独立 的 ， ATE TUN d" 的 维 数 ， 所 以 可 作为 空间 将 一 -个 
基底 . 

定理 ?9 Em, za o, cm.) V — É, 
PER ac 和 它们 都 直 交 , BD 


(%, vi) —0, i=l, 
则 必 有 w=0. ， i . 
证 明 BIA x. o, m 构成 空间 dnd "E gl 
任何 z LI ETT E 80 EE i @ " i 
g ose e “十 oo ` Ves 
根据 内 积 的 性 质 ， 


(a, 2)-(x, È am) È a (m, 2)-0,. m 

Jis a0, de. DM 
3-3 内 积 的 表示 

前 面 已 经 讲 过 ， 在 宰 间 中 建立 基底 以 后 ， 向 量 enm vu 

它 的 坐标 E. n, Sa 表示 出 来 ， WERTHERA 

一 55 一 - 


基底 和 询 量 的 坐标 ， 把 任意 两 个 向 量 M y HARE, y) 
表示 出 来 为 此 我 们 假定 已 知 €" 的 一 个 基底 为 
Qi, Q5 `", On, 
它 不 一 定 是 直 交 系 , 在 这 个 基底 下 ， BUB fg 分 别 表示 为 
æ= (És, £s, o, £), y = s, Na, 2 Ta), 7 


B æ= Ei Qata Qa He t Én Qu, 
. Vu ode UT TS Qs. . 
根据 汶 积 的 性 质 , 我 们 有 关系 式 
UD lI (4,9) -(Z&a. 3oe)- 3 anta, qj 
BUS E p: hii Nir, . "a Vau G (17) 
qdüRos 8d Rs 
h= (q, a), i, 了 一 十， 2， Un . (18) 
BEN h = - a, MEME o . 9) 


并 且 Ay 只 与 基底 有 关 ， TR. 

由 此 可 知 ， 西 空间 <" h B z ñ p A, 可 以 表示 
成一 个 一 次 型 (17)， ROSA MEM 
I | H- D. (0e O 
据 (19) 知 , H-H', * 表示 共 轿 转 置 ， 这 就 是 说 ， 可 是 -个 
Hermite 48 EE, 

其 次 , 因为 (%， x) =o, 只 有 2 一 ond, a) -0, 所 
以 二 次 形 (47) 为 正定 , M, H ELA ER 

于 特例 , 戎 取 空 间 基底 为 标准 直 交 基 廊 .9 ` 

€1, €5, 0, @,, CR F, su 

BU Te; e= äu 4, J—1, ee, n, XXI, 内 积 的 表达 式 (17) 便 
Qoo pop E 


一 从- 一 


(z, y) - 3 ETa | QU 
HATA EI hip DURER -SR KE, 
其 矩阵 A 为 对 称 正定 ,并 且 (21) 化 为 mM 


(z, De S16. (em) 
如 果 把 2 在 空 : 间 天 底下 的 华 标 向 量 (&， £s, …， 后) 表示 
成 列 向 量 
s= E] 7 . e» 
Lad | 

KRED, HAN 2"， e s tuta 
(z, =) ==' "Hm, ` ^. (24) 

XE xj] 2”, ú 
(m, z>=z“*A@, (25) 
其 中 的 Ade—4owWub REPE. 车 基底 为 标准 直 交 系 ， 出 


(24) 和 (25) 分 别 化 为 mE 
| le -$ é, 
Iep- E. 
3-4 空间 的 直 交 分 解 | | 
MICHEL AERIS AER AAET WR, TOL 
步 考虑 ~- 种 特殊 的 直接 和 分 解 , 为 定义 直 交 投影 商定 基础 . 信 
设 是 西 空间 E 的 一 个 不 维 子 空间 ， 江 设 474554; 
是 它 的 一 个 直 交 基底 ， 对 于 整个 空间 CKE. RNAF 
补充 nm 一 个 直 交 向 量 ua, s Cu BE Qs, …， 加 构成 fg 
一 个 直 交 基底 ， 记 qea, rè d. P EPS BI. 》 a 3 A 
— tz — 


Span {arin Ul Qu, 
IRAE RR n-k, 并且, 其 中 的 任 一 向 量 w 和 子 空间 2⁄ 的 任 
何 向 量 都 直 交 , 因此 ， L. n— k i5 Tp w^ 的 直 交 补 
SH, 记 作 ` 
X7 -SpaniQui cu. 
于 是 便 得 到 空间 V" 的 一 种 直接 和 分 角 
Cup Ap (26) 
空间 多 " 还 可 以 进一步 分 解 成 若 于 个 互相 直 交 的 子 空 间 ， 
的 直接 和 。 于 特例 ， 于 给 定 的 直 交 EAE (qu rs, qu), V 
可 以 分 解 成 直接 和 : 
C= Span {0} OSpan{gs} O Spant}. (27) 
这 就 是 说 ， €^ 可 以 分 解 成 m 个 一 维 直 交 子 空间 的 直接 和 。 
KRAN 纪 " 也 可 以 作 司 粮 的 直 交 分 解 这 里 TRER. 


«$4. amapas 


41 线性 算 子 的 定义 
设 Z 和 %。 是 同一 数 域 疏 上 的 两 个 向 量 空 间 , 入 是 从 
77, 到 Y^ 的 一 个 上 映射, 即 对 任何 吧 E 0/5, 
At -—g9C Y^, 
BRA A AUS 下 列 性 质 : 
HEERKE, aC K, A adr) Lada, 
a -对 任意 的 w, y € 5, A(x--y) - Az-- Ay, EFE 
BEA DA eL EE RW] Y^ S ep ERR SJ Vo ARARE 
TEC Va 为 Ad SCR, KES. 
L7 OAYva€c Ya ` ` 
JAT ARREA, ae ZU). 0v 
= $8 — 


B, 对 任何 和 所 Ya 都 有 
A(x40) — Ax 4 A0= Ax, 
所 以 A0=0, 
8D Z, 中 的 零 向 量 在 Z rh A E SE bhi B: 
线性 算 子 A 的 像 空 间 Z2 CA) DY 为 Yn gui. 


B9, u, ved (A), 
则 必 存 在 &, y E ra, E 
Ax=u, Ay =v, 


于 是 有 , 对 任意 的 o, BEK, 
A(aw+BY)= “Az BAY -antBb, 
所 以 ， cg 二 BOEAYa 
由 此 可 见 ACE Ya 内 的 一 个 子 空间 。 
如 果 对 一 切 EY, ut f ES 
.Aw=0, 
使 称 A 是 零 算 子 , 常 记 之 为 0， 
算 子 的 运算 
GQ eA HacK, SHME B=0A, 
# Ax=y, HJ oa 
Bæ=s Aæ=ay, .. (28) 
Gi) A--B dr Budkb—4 J Z 到 Z 内 的 线性 算 
; 今 规定 ;对 EEn., : la) ug 
(A+B)æ= Az Bm, u ^9) 
并 称 C= AB AAT À B BJA. 
Gi) BA RAIMI) Y Bx Y 33] Z 内 
将 线性 算 子 ， Ya. Va, Ya 为 同一 数 域 E LEM E SN. 对 
z€ Z, > P gg 
y=Ax,z= By, 
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我 们 规定 
(BA)xr— B(Ax) = By-z, (30) 
称 BA IHT B A han. | | 

容易 证 明 , EXE A, A+B, 如 人 4 仍 是 线性 算 子 ,但 后 者 
的 像 空间 在 Y's 内, ZBACI. 

4-29 线性 算 子 的 零 空间 和 算 子 的 秩 

i A £ A. at= šJ Ya 到 同一 数 域 五 上 的 钢 量 空间 
Ya 内 的 线性 算 子 ， 

定义 10 在 空间 Z 中 满足 方程 f 

Ax=0 (31) 
的 一 切 向量 所 组 成 的 集合 称 为 线性 算 子 A ñ= = Bl, w 
ENA). | 
显然 , AA (AE Z 的 一 个 子 空 间 ， 因为 ,要 
Ax -—0, Ay- 0, 
则 对 任何 BEK 必 有 220 
A(az--By)-—oaAx:- HB Ay- 0, 
pp "2-89 €. (A). 

应 当 注 意 , 算 子 4 的 像 空间 CA) E IB] Bt 2 B] Y nm 
一 个 了 宝 间 ,而 零 空间 人 (44) 则 为 风量 空间 Z 内 的 -个 子 
空间 . 

zE X. 11 我 们 规定 像 空间 P(A) HIERA R PE 活 算 子 前 


Tk, 记 作 
Tank(A) =dim F(A). (82) 
像 空间 有 (4)， 零 空间 (全) 的 维 数 和 商量 空间 74 
维 数 之 间 存 在 有 以 下 的 关系 | 
定理 8 


dim Yi=dim H(A) +dim.Jr(A), (381 
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证 明 设 dim Y42n, dim.4 (A)-r, 
.AN) 中 必 存 在 基底 Bi Ds. ee ps BI, 
— Ap =0, i=1, 2 7, 
且 {Di …, Ph DREMM., 因为 dim Ya=n， 所 以 可 在 
A (AZIE nr AB] Bras, ns Pe 使 | 
Pi, uu D», . 
构成 774 的 一 个 基底 . 令 
q;-Ap, j=rti, <+, m 
A. 
1) BLS pas, cS p. 不 属于 P BiM 
q = Áp, 0, j=r+1, 。 
. 2) dra 08 qs 为 线性 独立 ， 因 为 ， Amam, APES 


= 
Oy tA Pets Tea p.= 


BJ Alary Desi ova) P 
从 而 应 有 ortiPria 二 十 on Dn MA. ,. 
ER Orp m uam tmm 0 外 ， 这 是 不 可 能 的 。 否 则 的 话 , dut 
WO pi, -…, Pa 为 线性 相关 。 

现在 我 们 来 证 明 
E | di (A =n 
为 此 ， 只 需 证 明 级 (4) 中 的 任何 向 量 g 都 可 以 表示 成 
Qi, 7s 9 的 线性 组 铝 即 可 .由 于 gE 经 (六 ), 记 以 存在 有 让 


= ae 73, 使 : ual uui n 
Y=Ax. 


设 e Bs pad sp, 
M : yc Ax= A(X Bpi )= Bragos ti TB q, 
BE Gres, …， q, 的 线性 独立 性 , IPREN, AR 


-igt 


dB y 2: = dim Z(A)--»-—v, WHE, 
推论 向量 空间 Ya Hf PER Psl B 
= N CA) Spanipoa, c, Du. (34) 
4-3 线性 算 子 的 矩阵 表示 
在 向 量 空间 中 建立 了 坐标 系 以 后 ， 空 间 中 的 向 晤 都 可 以 
尝 示 为 坐标 向 量 。 如 果 在 向 量 空 间 7. Z jV] E 
标 系 , HÓA, JA Z, 到 Ya 内 的 线性 算 子 A Aus PUR cR 
REKER. 我 们 先 假定 
dim 7-mn, dim Z; =m. 
在 YR Ya 中 分 别 取 定 基底 ， 
hi, e, 和 9， 
-因为 Ah,€ Y^, j=l, 2, ,和 ,所 以 它们 都 可 以 崔 一 地 表示 
成 gu o, On 的 线性 组 全 : 
Ah,- 3059, j=l, =; n, (85) 


次 设 z€ YI， 并 假定 它 在 基底 {和 y AREE 


æ =f; hiq Cs hat- £h, (36) 
* u= Az, FIR g 可 以 用 基底 g:, gu, o, gu 表示 成 
Y= gi naga «ns gm. (37) 


用 & 23i [36 (35) 两 端 ， 并 对 j 求 和 得 
y= Az = -A(3 £h, )- 26 AR, 


-H$ aug) g= Nig 


TEEBAST E y ARH (m, …; ma) RISE Eee BU AE: 
Qo a cy 之 间 的 关系 0 00 0s 0 su 
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p r r ' 

| "| | 4 Ga tt O3 | & 1 

| | | Usi Cog ''* Goon £s ! 
| l 
| 


(38) 


Gmi ma  ''* Came j | £a 4 


这 就 是 说 , 在 给 定 的 空间 基底 下 ， 线 性 算 子 A 可 以 唯一 
地 表示 成 mx n BY SE BE [a4], 其 元 素 ou 都 是 数 域 五 中 的 数 ， 
若 分 别 用 aa, Yo 下 示 向 量 在 有 关 基 底下 的 表示 , 记 Ang 为 线 
EAT 入 在 有 关 基 底下 的 矩阵 事 示 , 则 (38) 可 简写 成 . 

9,7 An m, (89) 

反之 ,在 向量 空间 Ya 和 ZG 4239 EEE h y RIO 
以 后 ,任何 一 个 元 素 属于 域 K BJ m xn Brig EE Lau], 由 对 应 
关系 (35) 硝 定 了 一 个 唯一 的 从 Y^. 到 Ys 内 的 线性 算 子 4. 
这 就 是 说 , 在 给 定 空间 基底 的 情况 下 , 从 到 Ys 的 线 钼 算 
Tq Aff mx» 阶 和 矩阵 [oo] 为 一 一 对 应 ， 

如 果 在 空间 Yi 和 Ya rh, 我 们 选取 另外 两 组 基底 

hi, ha, =, kh, 和 91 95, **, Drs 

JPE €, Yg Aro 分 别 为 向 量 cy LEGAT 4 在 有 
关 基 底下 的 表示 , WI 


Yy r= 4, gy. (40) 
现在 我 们 进一步 来 研究 同一 线性 算 子 A 在 两 种 不 同 坐标 系 系 
中 的 矩阵 表示 之 问 的 关系 ， 


今 假 定 空间 Y^ 和 Ya 的 新 、 旧 两 个 基底 之 间 的 关系 分 
别 为 


-Soh j=1, 2, ,m, 
9 -2 byg; $—1,2,-5, m, 


JRE w 和 多 在 新 坐标 系 中 的 坐标 向 量 分 别 为 
(En £5, 5, ED 和 Qs ms, 9°, Mads 
py æ= ii hite +£, R., g=% grt gs. 
令 O= [ey], B= [b], TAES E z A g der IH 
型 标 下 的 坐标 向 量 之 间 的 关系 . 


qu O3, 
U = Du; (41) 
因为 | Yy = Ay, pEr = Ay Cay, m EE 
Y= Dgy-- BAw, Cay, (42) 
fEA o Jo Angr ` 
所 以 有 
4, = BAy O (43) 


这 就 是 线性 算 子 À 在 不 同 基底 下 的 矩阵 表示 之 间 的 关系 , 其 
中 的 O # B 4I xv 人 阶 和 mxm 阶 方 降 ， 由 于 举 标 基底 
的 线性 独立 性 , 可 以 证 明 它 们 者 是非 奇异 的 ， 我 们 称 (入 ) 为 
坐标 变换 公式 , 称 O 和 P 为 确定 相应 线性 变换 的 矩阵 ， 
EXd2 Gd A R SUEmxedWBE, SIEGE 
mxm WHERE xn EOS E B g O 4 
A-BAO, (44) 
则 称 矩 阵 4 qm A 为 等 价 。 
从 以 上 的 讨论 可 以 看 出 ,所谓 等 价 矩 阵 , 实际 上 就 是 同一 
线性 算 子 在 不 同 空间 基底 下 的 者 示 . 
象 空间 的 直接 和 分 解 及 线性 算 子 在 子 空间 上 的 表示 ，, 
设 rank(4)=7， 并 假定 按 某 种 方法 对 ZA) 作 直 接 和 
分 解 | 
RCA) = 2,@2,@:..G,, (45) 
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其 中 ,dim d oro, Mim i-r. 于 是 显然 应 有 js 六 记 


空间 Z 中 与 A BE By] SE AEG DU S, $1, 2, e, E, WA 
易 证 有 明 S; 都 是 子 空间 ,并且 有 直接 和 分 解 : 
4^, S1: GS. (A). (48) 
4X isl, 2, e, 五 规定 算 子 A, 如 下 : 
Au — Ans nuu) du, 
Xp, — £a4€S, d—i,,R, uE (A). 
容易 证 时 ，4, 都 是 线性 算 子 ,并 且 它 们 的 和 就 是 A, EJ, 
A= Ai As + Ay. (48) 
# S, $8 R IARE F AR EUR 10 A, 的 矩阵 表示 为 s, 
"X4 non rds SE yE, mAT A 在 子 空间 


S,@S,@-:: GS, 
上 的 矩阵 表示 为 . 
一 A, ] 
0^ . 0 (49) 
- A, | 


如 果 在 .4) 中 也 选取 一 个 基底 ， 不 论 这 个 基底 如 何 选 取 ， 
SET AXES RB Y. 上 关于 上 述 基 底下 的 矩阵 表示 为 
[ 4: 


0 D 0 


i 


Dr ed 


(50) 


(am, 
e 


这 颗 的 4 是 一 个 吧 xm risk, 应 当 指 出 ; 在 空间 Ya 中 也 
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要 补充 0 一 7 个 向 量 以 建立 基底 ， 而 上 述 和 矩阵 才 示 则 与 补充 
的 向 量 系 无 关 ， 
作为 特例 , 如 果 在 Z, M Š, 中 所 取 基 底 
Qu, Ox, 77, Gi 和 Pro Prs s Prr 
之 间 有 关系 Q= AP j=1,2, en fo | 
则 算 子 A, 的 矩阵 表示 A, 就 是 rx r MAME I 从 而 4 的 


矩阵 表示 为 | 
I I,! 91 u 
|Z l (51) 
"TENE 


由 此 不 难看 出 , 一切 秩 为 7 BJ m x w 阶 矩 隆 都 和 (541) 中 
右 端 的 矩阵 等 价 ， 


$5 本 空间 上 的 线性 算 子 


9-1 西 空间 中 向 量 的 表示 
内 为 西 空间 中 定义 有 内 积 ， 可 以 用 它 把 坐标 向 量 表示 出 
来 ， 如 取 % 维 酉 空间 V^" 中 的 一 个 标准 直 交 系 
€i, €>, te €, 


作为 基底 ， HE c 在 这 个 基底 下 的 表示 为 


£i 
2| ° |, 
n 
Bp, 
x= ei HÉ C+ +, (52) 


因为 {e} 是 一 个 标准 直 交 系 , 所 以 
(x, ej) -3 Ele, €) = é, 
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TE 66 13:33] p] z 的 表示 式 


i (æ, €i) | 
z-| (æ, €s) . (88) 
| (æ, e) | 
Tii g B: oc 的 长 度 为 . 
ieP-3 là. 
52 伴随 算 子 s 


设 4 是 从 西 空 间 v"—€"WuB—TATMET, A" t ë 
一 个 从 €"-» 内 的 线性 算 子 ， 如 果 对 任意 两 个 向 量 w，BVE 
(Az, y) - (e, A'y), (54) 
便 称 4 为 和 4 的 伴随 算 子 ， 因 为 ,如果 (54) 成 立 , 则 必 有 
(A'y, x)— (g, Ax), 
所 以 , A tE: A 的 伴随 算 子 ， 
定理 9 对 于 任何 线性 算 子 AEE), 恒 存 在 唯一 的 
伴随 算 子 A". 
证 明 ”在 西 空间 Z" 中 到 标 准 直 交 基 底 
ei, €z, ''', Cn, 
4 的 伴随 算 子 A" 如 果 存 在 的 话 ， 对 任何 向 量 y€ €^, 它 应 满 
足 关系 
A'y - SCA'y, e,)e, 
W ü 
A"g=2(g, Ae) e,, (56) 


(8B) 式 的 右 端 不 显 售 4"， 所 以 这 个 方程 便 可 以 作为 A 的 伴 
HATA 的 定义 ,满足 (55) 的 算 子 A" 也 必 满 足 (54)， 
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现在 我 们 来 证 明 , 由 (55) 定 义 的 算 子 A" 是 线性 算 子 . 对 
任意 的 复数 aE V, IR EE ue V^, 


A' (ay) «Soy, Aene ico Sy, Ae)eioA'y, 
所 以 , A° RN EE, Uribe gr 为 C 中 任意 两 个 向 量 ， 
A" (æ y) =$ (ey, Ae)e= 3e, Ae)e, 


HM (g, Aee = Aw *A'y, 


所 以 , A 也 具有 可 加 性 , Aoi urn, A 是 一 个 线性 算 子 。 
. 关于 唯一 性 问题 , 可 设 B 也 是 由 (55) 所 定义 的 算 子 ， 则 - 
HEX yc", A'y- By, Bl 
(A*'-B)y-0, xj-uyce, 
Bm5uuA4-—-B8-0,H . 
B—A', 证 毕 ， 

这 里 顺便 指出 ， 伴随 算 子 的 概念 ; 可 以 推广 到 从 grg” 
的 线性 算 子 上 来 . 

5-3 伴 随 算 子 的 矩阵 表示 

今 假 定 在 西 空间 个 中 取 定 了 一 个 标准 直 交 系 {@i, es, … 
€,) ,以 其 作为 基底 , 从 CC 的 线性 算 子 A 的 逢 降雪 示 为 

A= [a5], 

它 是 一 个 wxn 阶 的 复 秆 阵 , 记 A 的 ”个 列 向 量 为 ea ga ee 
a, VU 


£e; =a D(a oe Sae (Aer, €) êen 
i=] i=1 i= 
所 以 a, B5 ¿ IRE 
Gis (Aer 0), i k=l, 2, v nV 
VERI 83838 D, EITA By RRA Dad, 
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a= (A'e, e), i b-1,2,-,n, 
从 而 可 知 | 
G5, Å, k=l, 2, mn, 
Bl | 
Caw] = [G], (88) 
XM, A 的 伴随 算 子 A" Bog pese 未 A Bakim 
OEE ERA 
伴随 算 子 的 一 些 简单 性 质 —— 不 难 
证 明 下 列 性 质 ， i 
1) (A= 
2) ALB A -B*, 
8) (GA)'«aÁA', 
4) (ABY - BA. 
关于 伴随 个子 的 矩阵 表示 以 及 上 列 简单 性 都 不 难 失 
广 到 从 Cee 的 线性 算 子 ， 
定理 10 设 和 为 从 西 空间 v9 m HAT, A" 是 
它 的 伴随 算 子 , 则 
H(A')=.N (A), | (57) 
WEB] wc", yc", x. gf 为 任意 , WJ 
(Az, y) - (m, A'y). 
zim-c. UD, Ws Aeg 
(æ, A'y) = 0, 
BUT y IER, BED) CA) CAP CA), 
反之 ,对 给 定 的 wE 经 ,车 对 任意 的 VE8r TS 
(x, A'y)=0, 
Bj c C P A"), 
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于 特例 , 2 u= Az 便 得 


(Ax, Ax) -0, 
所 以 必 有 Av -0,8] oc ANA). 
因此 有 ZA) -47- (A), ute. 


定义 18 EANA €" €" 的 线性 算 子 ,， A" 是 它 的 位 
随 算 子 , 若 


A= A* (58) 


则 称 4 为 自 伴 算 子 ， 
因为 (A5* - A, 
Br 3; À 328 Ez T, 则 其 伴随 算 子 A* 也 是 自 伴 算 子 . 
对 于 从 CE" 的 线性 算 子 4 及 共 伴 随 算 子 A". ABB 
直 撑 考虑 (58) , 但 算 子 积 
AA" 8i A'A 
分 别 是 从 e" v^ 及 从 «€ 的 自 伴 算 子 。 
根据 伴随 算 子 A" 的 矩阵 表示 可 知 , AAH N 
[a4]* = [au], | 
Hlal H 4 的 矩阵 表示 , * 表 示 转 置 共 轿 运算 ， 邑 , 自 伴 算 
子 的 矩阵 表示 是 Hermite 年 阵 ， 
对 于 欧 氏 空间 上 的 线性 算 子 A, KEERT A" 的 矩阵 
EPA 委 的 矩阵 表示 的 转 置 , 即 
[A*] — [4]", 
AJER A BERES. MATAM, 欧 氏 空间 上 自 伴 算 子 的 
AB IE E JE SAJAK yE PE. 
5-4 西 算 子 和 直 交 算 子 
EXI . 设 区 是 从 再 空间 6" 6" PERIERE EE 
UU" = AU U- I, (59) 
了 为 单位 算 子 , 则 称 0 是 一 个 酉 算 子 ， 
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对 于 从 欧 氏 空间 A-A" 内 的 线性 算 子 U, EUN E X 3 
(59), 刚 称 它 是 一 个 直 交 算 子 ， 
定理 11 从 西 空间 €-—«€"pmHATMAST UAEBST 
的 充分 必要 条 件 为 ， 它 保持 向 量 的 内 积 不 变 ， 即 ， 对 任意 两 个 
向 量 z, yE €", EU 
(Ùx, Uy)= (e, y). `- (60) 
证 明 设 U E— EDT. 
UU* -U*U-I, 
IER w, yE Z", 
(Ux, Uy) = (x, U*Uy) - (z, v), 
Bj (60) ni xr, 所 以 条 件 是 必要 的 ， 
现 假定 (40) 对 任意 的 向 量 a gc e RRE, 其 中 ， 令 
yo 
(Ux, Ux) = (æ, 2. 


所 以 有 (U* Ux, x) = (m, æ), 
这 就 是 说 ,对 一 切 wE%, 恒 有 
(QU*U-- Dao, £)-0, (61) 
算 子 UU- 了 显然 为 自 伴 算 子 , 记 之 为 4， i 
A-—U'U —I. 


今 证 必 有 有 A-—0,. 为 此 虽 的 ,我 们 可 利用 恒等式 
(Az, y) - (Ay, à) - (CA(z 4), w+Y) 
—(Aa, æ) — (Ay, y). (62) 
因为 A 是 自 伴 算 子 ,所 以 (Aw, y) = (e, Ay)， 但 是 根据 内 
积 的 性 质 ， | 
(Az, y) - (y, Ax) —- (Ag; z), 
这 就 是 说 , (Ax, PAAY, t) ARMA. TÆ, (62) 的 左 
端 可 以 表示 成 
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(Ax, z) - (Ay, x) -2Re(Az, y). 
记号 “Re” 表 示 取 实数 部 。 同时 ， 由 (C61) 可 知 , (62) 的 石 端 化 
为 0, 所 以 必 有 Re(Az, y) =0. 
4 (Az, y) | =0(Az, y) - (Ax, u), 
其 中 0 是 某 一 个 模 为 主 的 复数 。. M Oæ tei Re(Aw, y) P 
的 2c 就 得 到 关系 
0=Re(A(8æ), yY) = Re[0( Az, v) 
=Re|(Az, y)| =| (Ac, y]. . 
Hime, 的 任意 性 可 知 O 
A=0, 
BE] U*U =I 
HATE UT—I,gB UR— BERT. i 证 毕 。 
推论 条件 (60) 等 价 于 , 对 任意 的 EGG 恒 有 ` 
(Ux, Ux) =《C， m), 
这 就 是 说 , VEA T RS EI RERO HE REIR AE, 
B ECT BAUR EASA Ç" pAGEXEEE, UR 
子 可 以 表示 成 一 个 ”xm WERE. 因为 算 子 积 的 矩阵 表示 为 
算 子 矩阵 表示 之 积 , 故 有 


U'U-UU'- I, (63) 
I RRX 单位 阵 ， 从 而 可 知 西 算 子 的 矩阵 表示 具有 关系 
.  U*=U-+, 


$6 投影 算 子 及 其 矩阵 表示 


0-1 投影 算 子 的 定义 和 基本 性 质 
现在 我 们 假定 本 空间 C 已 经 按 某 种 规则 确定 了 一 种 直 
TON 8: 
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@ = OT. (64) 
于 是 , 空间 Z" 中 的 每 一 个 疝 量 oc E RT ELE — HERO RE 


X-1-cU, WEK, vC Y. (65) 
的 形式 。 今 规定 从 名 到 入内 的 线性 算 子 忆 如 下 ; 
Pr= 2. . ` (66) 


我 们 称 卫 为 空间 e. 的 直 搂 和 分 解 (64) 所 确定 的 一 个 投 
影 算 子 。 更 详细 一 些 ,号 是 从 酉 空间 @" 沿 子 空间 Z 到 子 空 
间 六 上 的 投影 算 子 ， 显 然 , 若 e COL W| Pro, 从 而 可 知 
PYcw,. : (6T) 
ditas, VERF P j- .个 不 变 子 空间 ， 
RTP rB BU w 为 向 量 多 在 子 空间 中 的 像 ， xxx 
的 投影 。 而 W^3chs LXORRSET PHAZE (P) 因为 ， 
对 一 一 切 &%E Z, 恒 有 
Pv-0, (68) 
所 以 , 子 空 间 X 就 是 算 子 到 前 零 空 间 .YA( 百 ,于 是 空间 E 
的 直接 和 分 解 (66) 也 可 以 表示 成 
E= RPION (DD), (69) 
容易 证 i5, 算 子 卫 是 一 个 线性 算 子 . 
EER 从 西 空间 €^ 到 6" 内 的 线性 算 子 也 是 投影 算 
充分 必要 条 件 为 ， 
P =P, (70) 
HI, PETERET. 
证 明 设 刀 是 空间 分 解 (66) 所 确定 的 投影 算 子 , CE 2" 
i-:t0-—9. TE 
Pe = P( Pay = Pws w= Pes, 
Ku Pjàk—^5xET. 
现在 我 们 假定 Pk - SERT. WIN Z" ET EI 
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分 解 
r= Z(Pyo. (P. 
ik wc ACP), MuE z€ Z" tE 
Px=w, 
据 卫 的 等 短 性 可 知 
Pw= Px = Pa = tp, 
这 就 证 明了 已 是 一 个 投影 算 子 ,证 毕 ， 
定义 15 zsHJAdR(04)E XT JA e" Y^ PJ y Em 
投影 算 子 已 ,根据 分 解 (6 的 对 称 性 ,我 们 同时 也 可 以 定义 从 
空间 ë" 沿 子 空间 xaTa % 上 的 投影 算 子 @@， 即 ， 对 
(68) 中 ac 的 相应 分 解 — uq, 


Qa —- v, (11) 
显然 +@= 了 这 就 是 说 ,用 投影 算 子 号 可 以 把 @ 表示 出 来 
Q-—I-P. (12) 


我 们 称 Qi P JAMES SE F. Wu npe, P REUS 
是 他 的 补 投 影 算 子 . 
投影 的 几何 意义 “ 今 以 三 维 欧 氏 空间 A? 为 例 来 加 以 说 
Hj, tig. gs, ga E 22? 的 一 个 基底 , 令 
W —Spanigi, Do} 
y =8pan{g;}, 
于 是 对 209 MEERN e 
WH’= YOY, 
问 量 x 在 子 空间 WY 上 的 投影 为 Px=w, FZE Z buy 
J 2 Qx — v, 如 图 1-1 所 示 . 
6-2 直 交 投影 算 子 Ey En AEZ E 中 的 一 个 
了 了 空间， y 为 其 直 交 补 空间 .我 们 有 直 交 分 解 
Cr WOW (13) 


= O4 — 


R 1-1 


由 子 空间 六" 所 确定 的 这 种 分 解 ， 规 定 了 从 E W y” 0x9 w^ 
的 投影 算 子 , 称 之 为 直 交 投影 算 子 ， 由 于 分 解 (73) 为 W^ E 
一 确定 ， 雇 以 这 种 投影 算 子 可 以 记 成 Py, 以 示 它 与 Y mx 
R. P, 的 直 交 补 投影 算 子 可 以 表示 为 Py 
从 西 空间 多 "到 了 予 空间 上 的 投影 算 子 不 是 唯一 的 ,而 
Pe NEE. i 
如 果 把 空间 多 "进一步 分 解 成 # 个 互相 直 交 子 空间 
Wi, t, Wre 的 直接 和 
E= WOYO ON, (74) 
这 种 分 解 就 定义 了 个 直 交 投影 算 子 P. ¿=1, 2, -., k, 
我 们 有 关系 
Py Py P, =I. (18) 
AECH, OE SUCPADOS SEREAUCT, 反之 亦 然 ， 直 交 
投影 算 子 当然 也 必须 具有 等 者 性 ， 因 为 它 是 投影 算 子 ， 但 仅 
SERERE MINIS, 它 需 要 具有 更 进一步 的 性 质 ， 
EWI ”定义 在 西 空间 Z" 上 上 的 等 宕 算 子 天 为 直 交 授 
影 算 子 的 充分 必要 条 件 为 ;到 是 自 化 算 子 。 
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证 明 今 先 证 明 直 交 投 影 算 子 PXuBMAT. 
和 算 子 吾 相 应 的 空间 分 解 为 
v-Z0P9490P)-20)9(P. — (6) 
Re, y 为 € 中 任意 两 个 向 量 , H 
w =W V, Y=W tUa, 
Wa, WE Z(P), v, vc AI CP), 


于 是 (Pæ, y) = (Pus, to 十 bo) 一 (0 Wa), 
(æ, Py) = (t, Di, Pw) = (W, Wa), 
BR C (Px, y)= (x, Py) 


和 恒 成 立 ,所 以 P DS ELEESET". 
EIL, EBUESGEHOTOPCHhBBgS. 划 可 以 证 明 它 必 
为 一 个 直 交 投影 算 子 。 就 是 说 , MERN veZ (P), IH 
Pv=0. 7 
HERR wE €" GRA P E] E E, FU 
0= (Pæ, v)— (x, Pv), 
Hl, 等 式 (e, Pv) -0 
对 一 切 % 莉 成 立 , 所 以 必须 Po=0, 这 就 证 明 已 是 一 个 直 交 
投影 算 子 ,证 毕 . 
6 投影 算 子 的 矩阵 表示 
现在 我 们 来 考虑 在 空间 中 建立 坐标 和 以后， 如何 把 给 定 
的 投影 算 子 用 相应 的 矩阵 走 示 出 来 的 问题 ， 首 先 我 们 考 洪 一 
般 的 投影 算 子 ， 设 有 是 空间 的 直接 利 分 解 
200 0— 7 
BUT E BS JA 28 |a] ë" 沿 子 空间 YC 2]: mide) WY 上 的 投影 算 
子 , 并 假定 
dim72/—y, dim Y'"—n-—m, . 
在 子 空间 ob 和 YC hy SER SE SEIS 


Wi, Wa, +>, W, fl Di, Vo, cn, UV, s, 
这 两 组 基底 联合 起 来 便 构 成 空间 €" 9g 35 ys. eh RN 
还 假定 在 空间 €" 中 已 经 建立 了 一 个 坐标 系 , 而 记号 ws, v, IR] 
时 也 是 它们 自己 在 这 个 坐标 系 中 的 表示 . 记 三 为 投影 算 子 到 
在 给 定 坐 标 系 中 的 矩阵 袁 示 , 它 是 一 个 nxw 阶 和 矩阵， 根据 投 


影 算 子 的 定义 ,应 有 
Pw,—w,, ¿=1, 2, --., v, 

Pv;-0, j=1, 2, =, n— m, (TT) 
依次 用 Us, ee, W, 和 D, Do，… One HA EFE moon EAE 
nx (a —7) Br AB EE | | 

W= [tb 10, --, w], V-[vi, vo, 5, Oar), (78) 
今 O=[W T] : 200 (19) 
于 是 有 


PO= [Pw =, Pw, Pv, =, Po, ,] 
—[w. e, We, O, =, 0]= [Wi0], (80) 
Bi O 的 呈 个 列 向 量 线 性 独立 ,所以 矩阵 O JpSRE, BIER 
REC defe. 用 它 右 乘 (80) 的 两 端 , S ENDE PHE 


HRR | | 

` P-e[Wj0107 = ([W iO] W|V 1^, (81) 

于 特例 ， 如 果 用 US, s, VU, 04, t, Oar 作为 基底 建立 
空间 V^ BI ARTS AS, 那么 ,在 这 个 坐标 系 中 ， W, b, 的 表示 为 


[i] 07] NU EN 
"mpm n 
|i | j 9 o | š 
wi : " es, ,=| 1 n o-| 1 QUU, Wo : | 
0 0 : 
! lo 

V : | 0 
20. 0 _0 BN 


[7 1. 0 
A "-[] r= pas 
其 中 的 工 fL, ABER r X r BER Qi nx (a ZI 
位 阵 . 这 时 
WiVY]-1, [WiV] 1-1, 
从 而 投影 算 子 的 矩阵 表示 便 简化 为 
I, 0 
Mi € 
现在 我 们 来 考虑 直 交 投影 算 子 Py 的 矩阵 表示 ， 为 简单 
起 见 , 我 们 在 C” 中 取 一 组 直 交 基底 建立 坐标 系 , 而 wn o, E 
时 也 表示 它们 在 这 个 直角 坐标 系 中 相应 药 坐 标 向 量 ， 因 为 在 


直 交 投影 的 情形 
y^ u, 


所 以 wil, ¿=1, 2, Ut 7,j—1, 2, =, noT, 
于 是 有 W*y =0, 
有 端 是 7X (n 一 7) 阶 零 矩 阵 ， 在 这 个 坐标 系 中 ， k 
+ Py 的 矩阵 表示 可 推导 如 下 ， 
因为 
(OWiV]*UWiV]) *= [Wi VJ (IW i Y 1) 
We] a pw o T. 
uU vpn "no vv] 
x | 
| 0 a) E 
WW 0 
0 (y 
WW i ye | 
(VV) -1 y* 7 


]orivy 


~、 


— 38 — 


AERD Pu 的 伟 阵 表示 为 
Py= [WIO IW jV]? 
TOW)? Ww 
= [W 10) | (yy? y* | 
人 W. (88) 
TR Us, n, Ws, Va, nn, Onr 是 一 “个 标准 直 交 系 , 则 
W*W-I, VY -I,,, 
这 时 投影 算 子 Py UBRO HUS 
PQ—WW'. (84) 
64 投影 算 子 的 秩 和 直 交 投影 算 子 的 单 秩 分 解 . 
对 于 由 空间 分 解 (64) 所 确定 的 ~ - 般 的 投影 算 子 P, HE 
为 
rank(P) =dim R(P) —-dim*Y^— r, 
对 主任 何 非 零 向 量 ape w, RNE 
Pw -w, 
这 就 是 说 , 子 空间 W 中 网 任何 非 零 向 量 wo REAT Pi 
aR, 它们 相应 的 特征 值 都 是 1， 而 对 中 的 任何 非 零 向 
i ov, ER 
Pv=0, 
这 就 是 说 ，Y 中 的 非 零 疝 量 都 是 算 子 P pz EUH W 
的 特征 向 量 ， 因 为 
dim W=7, dim V 一 如一 9 
所 以 ,对 应 于 特征 入 二 只 能 有 7 个 线性 独立 的 特征 测量 , 而 对 
应 于 特征 值 零 则 只 能 有 %-"7 个 线性 独立 的 特征 向 量 ， 现 在 ， 
我 们 对 直 交 投影 算 子 Pr "fe 进一步 的 研究 ， 并 给 出 它 的 谱 
分 解 公 式 ， 
W dim W =r, EZ ij Z PREMERA. 


UA, Us, +, W, 
作为 Y RSS. 3EIBER ELTE ?Do £91, 2, +, 7 所 张 成 的 -~ 
维 子 空间 为 Y, 
Z= Span{Ww}, 4-1, 2, =, v, (85) 
由 于 空间 Wi 所 确定 的 直 交 投影 算 子 记 之 为 P. TE 
Pad jui bohjenimoes — (9 
并 且 , 对 任意 的 wE o dog 
Pe-—0, ¿=1, 2, =+, v, (8T) 
根据 85 和 (86) 显 然 可 知 ， 由 了 维 子 空间 KW 所 确定 的 直 交 
投影 算 子 Py 可 以 表示 成 7 个 直 交 投影 算 于 Puce, Pu 
P= P,+ P,+-... tP, (88) 
这 就 是 直 交 投影 算 子 .Py 的 单 秩 分 解 公式 ， 

如 果 我 们 在 空间 6" 中 选 定 一 个 标准 直 交 系 作为 基底 以 
建立 空间 €^ BRR, ETRE WD, Wa oe, tD. 是 前 述 的 
一 个 标准 直 交 基底 ,而 记号 wv, 本 身 同 时 也 表示 关于 V" 中 所 
Xe BL 3635] F IU pu, MWER SE Y P, i1, 
2,…, r HERRERA 


Pea, i=l, 2, ee, r, (89) 
从 而 直 交 投影 算 子 Py HARRER Py 便 可 以 表示 为 
Py=pani + 0905 e HAD, (90) 
因为 Papp, = tp, i—-1,2,-.,-, 


Pæ=0, xE H, f 
B w: 是 Pi 的 特征 向 量 , 相应 的 特征 信 为 1, 由 于 其 秩 为 1 
MARR m1 个 特征 向 量 都 对 应 于 特征 值 零 , 出 此 还 可 以 进 
一 步 看 出 ，Pw 有 ?个 特征 向 量 10s, ws, e, W, 对 应 于 特征 
18 1, 丽 其 余 n 一 ?个 特征 向 量 则 对 应 于 特征 信和 零 。 因此 , 我 
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TIER (00) Zu P, WII f. 


$7. 向 量 和 算 子 的 范 数 


7-1 向 量 的 范 数 及 其 基本 性 质 ` 
设 六 是 定义 在 复数 域 € (或 实数 域 Z) EB = HEP =š 
IH, 在 Z bie s Y P B Bp P R. 前面 已 经 讲 过 , 利用 内 积 可 
定义 向 基 的 范 数 mE 
læl= (æ, z), (91) 
现在 我 们 进一步 来 研究 向量 范 数 的 基本 属性 。 
ERI 由 (91) 定 义 的 向 量 范 数 具 有 下 列 性 质 ; 
1) [a] 20, RÄ 2-0 J || 0; 
2) lez = lel [xi HERH «€ v, «€ Y 
8) 对 任意 的 向 量 m My EA | 
lw +yl< ml iul. 
证 明 和 性质 1)~2) 是 明显 的 ， 现 在 只 需要 证 明 3) 就 行 
了 ,为 此 ,我 们 先 证 明 向 景 内 积 满足 Schwarz PER: 
(e, y) slieæliyl (92) 
因为 根据 内 积 的 性 质 , 对 任意 的 向 量 gr DLS Rl to 
TB 
(X-Fug, X-ay)z0, 
BB — (m, æ)+a(æ, g) +a(g, &)--|al*(y, 9270. 
4i y 0, 则 Schwarz 不 等 式 显然 成 立 , 今 假定 多 0, 这 
时 可 令 i | i : 


Ea RAE 面 的 不 等 FIN 中 ,得 
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^y, Vy 
pp Io, aD x (æ, æ) (y, = Ilu, 
或 | (e, uIx[eliul. 


从 而 便 证 明了 Schwarz 不 等 式 ， 
现在 来 证 明 范 数 的 性 质 3). HA 
iz -- |^ = (m+, cy) (m, a) HY, £) 
(m, p) + (g, 9) xlol?--2|lollul-- Ig? 
- (loi--iyp, 
所 以 必 有 [e--ylisial-- iy]. EE. 

以 上 我 们 证 明了 出 内 积 所 定义 的 向 量 范 数 所 具有 的 一 些 
基本 性 质 ， 一 般 来 说 , 定义 向 量 荡 数 并 不 一 定 要 借助 于 内 积 ， 
可 和 定义 jz 为 向 量 z 的 一 个 实 值 函数 ， 使 它 具 有 前 述 定理 中 
的 性 质 i~). 

在 % 维 向 晤 空间 入 中 建立 了 一 个 标准 直 交 基底 后 , 任何 
EE oc 那 可 以 表示 成 相应 的 坐标 向 量 


& 


L £s | 
TB p Ba gak el] BE HE DLE 
|a] = CIE 4-181 9, (98) 
实际 上 , 一 般 也 可 以 规定 , 
(Jé Peet l Enae 
来 作为 范 数 的 定义 , 可 以 证 明 , 只 要 po, 范 数 的 性 质 1) 3) 
都 成 立 ， 这 种 范 数 常 记 作 ml, BID 当 p=1 时 
Iwi=|é tetli (94) 
253 p= eo 时 ,可 证 
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Im]. — max lé. (95) 


Tri at DSL RRD E X RE (93) 实际 上 就 是 这 种 站 范 数 的 
一 种 特例 , Bl doa. p EETA 2 WOE PERI B) fe 
小 二 乘 问题 ， 对 我 们 来 说 重要 的 是 {eljs， 记 以， 除非 特别 声 
明 , 记号 Iw| 总 表示 向 量 的 欧 氏 范 数 一 一 即 3- 范 数 ， 

7-2 线性 算 子 的 范 数 

4153332, 我 们 就 可 以 规定 相应 的 算 子 范 数 ， 为 此 
我 们 先 证 明 

TRI 设 加 和 是 定义 在 复数 (或 实数 ) 域 上 的 有 
BREEZE, 4 是 从 Yi 到 Z, 内 的 线性 算 子 , 则 A 必 有 界 ， 
BIDS. — E] a € Z. li der F ro h. fE 

| Ax xbv, (96) 

证 明 dim Y^,—», B Z 中 的 一 个 标准 直 交 基底 

122, =, V) LIEBE) e € v^ 者 可 以 表示 成 


p 
&— m, i), 


BLA [es ml, ¿=1, 2,…, %, 于 是 便 得 到 


JAg! = lA (am, EE | = p» (a, 2) Aa, | 


«ile, e21LAn| «Sel - [oH Ans] 
s(342)iat. 


b= Aa, 

便 得 到 [Az] «ial. 

从 而 便 证 明了 线性 算 子 4 的 有 界 性 ， 证 毕 ， 

根据 算 子 的 有 界 性 ， 立 刻 便 可 以 证 明 线 性 算 子 对 向 量 2 
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à 


的 连续 人 性, Bp, 25 [820]—0 BJ, 

[A (2-52) |-»| Ax]. | 
因为 jAQer52)—-Ax|-]A92| xk]8 rl, 
而 llAGH52)|—1Am| | «LAGer 82) - Av]. 

5E X. 16 


[A] —sup Mel, .. (97) 
因为 以 交代 “上 式 有 端的 分 式 不 变 ， 所 以 C97) 可 只 
改写 为 | 
| |A] -sup[ Ael. 
另外 ,因为 ac 是 连续 的 ,而 单位 球面 
|z] =1 


是 一 个 有 界 闵 集 , 所 以 总 存在 [4] —1, 使 
| A£| —sup [42], 
iri-i 
所 以 上 式 又 可 以 改写 为 
iAl= max 1a. (98) 


WIDE 302 T EG, MANAMI ANAR RENED, 
i* |JAl>20 RA A=0 832 101—0, 
2? 对 任意 复数 a ue JA 
9° 设 轩 也 是 从 Ya 到 Ya 内 的 线 d 子 , 则 
LA Bi A BY 

VLA, XS XEUEUT T 705: 

£ BENA Y 到 VARREST, MDM EE e€ 
Za T 4g Zac =, WI 


i vo 


l 1 = 1, 
° D ELT Ys k r TL rr ye CEN 
5^ PW S E Z Upyay VU 


— 4 -- 


| PI =1; 
6" EUSA rI Yi 的 西 算 子 , WER 
(Ule ]U* =, 

7-3 算 子 范 数 的 几 个 等 价 定义 : 

前 面 所 定义 的 算 子 范 数 ， 还 可 以 表示 成 其 它 它 等 价 的 形式 。 
我 们 有 

定理 16 i A ABS Y^ 到 Y 的 线性 算 子 ; 则 下 
列 结 论 成 立 ， 


( 4i - mp f serv VEN) 


G) [A= sup (Az, iD; z€ Y g€ Y3. 


证 明 G). GOE Rate 显然 是 等 价 的 ， 今 只 需 证 明 
Q) 5 (3) Zz — RIRT, 记 


^ 20)! 
rsup| a 21 (Ar DL, z€, yc 2 


zm [ælg] 
因为 æ, wixlIAeligtstál-I«l-1ul, 
PADA TslAi. 


次 设 xz 3) Aes 0 HERO TRE AO, 5 
则 定理 显然 )， 于 是 e0,0 u= Lo, 出 有 


lási Aw, gi 
læ iwllyl 
所 以 
— guy 4E] cus J (Az. v) ; 4 } 
[A| sap -l : xi ^A l |z| |z! 2 vE Y^, yc Y 2 
从 而 可 知 lAl<r, 


于 是 就 证 明了 等 式 [Al]-v. WES. 
根据 这 个 定理 , 可 以 证 明 算 子 范 数 的 另 一 重要 性 质 ， 
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7° BEA A RRES, M 
[A'] -1A1. 
证 明 任 取 二 向 量 wE Yu, VE Z, x30, g 0, I 
(Aæ, u) | = | Co; A'y) I «t'ileitol, 


Hot EE M ze 
这 就 表示 。 “， (Als iA 
交换 Am A" 的 位 置 ， 全 和 相反 的 示人 
JA" <l Al. 


所 以 必 有 |A"|= [A]. EE. 
7-4 ATENTEN 
Ó]; Z, Z s 都 是 有 限 维 酉 空间 ，4 为 从 yy 到 Z, 
内 的 线性 算 子 ， 的 为 一 个 从 Ys 到 内 的 线性 算 子 ， 设 
TE Y^, H 
y= AXE Y, 
z-ByC Y, 
今 规 定 算 子 B 和 有 4 的 乘积 为 算 子 BA, 
(BA) = By =2, 
ER DA 也 是 从 Yi 到 Z 内 的 线性 算 子 。 根 据 算 子 范 数 的 
意义 , 不 难 证 明 
8" jBA|XxIAIJIBI. 
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m m We 


广义 道 矩阵 的 算 子 理论 


81 线性 算 子 方程 的 求解 问题 


dt v" €" Jg n EMMER, A 为 从 ea 
多 "内 的 线性 算 子 ， 今 考虑 线性 算 子 方程 
4 一 5， (1) 
Hp bc 为 给 定 的 向 量 , 而 z€ Z" 为 待定 向 量 ， 
定义 1 FRENE cce 满足 方程 (1)， 便 称 线性 算 
TP P OD) 为 相 容 , 否则 就 称 (四 为 不 相 容 ,或 说 它 是 一 个 矛盾 
方程 ， 
关于 线性 算 子 方程 的 求解 问题 ,常见 的 有 以 下 几 种 情形 ， 
1^ 相 答 方程 的 求解 问题 ， 
如 果 线 性 算 子 方程 仁 ) 为 相 容 ,其 解 可 能 有 无 限 多 个 , 但 
在 解 族 {w} 中 ,具有 极 小 范 数 121 的 解 ,可 以 证 明 是 唯一 的 . 
定义 3 相 容 方程 的 解 族 中 ， 县 有 极 小 范 数 的 解 ， 称 为 线 
性 算 子 方程 的 极 小 范 数 解 ， f 
于 是 便 有 
2° 求 相 容 方程 的 极 小 范 数 解 的 问题 ， 
如 果 人 (不 相 容 ， 即 它 是 一 个 矛盾 方程 ， 这 时 (DD) 不 存在 
通常 总 义 下 的 解 ,但 是 可 以 考虑 求 vC V", 使 
| Ax —b| — BU) (2) 
HJH, TEES 
9° 求 矛 盾 方 程 的 最 小 二 乘 解 问题 ， 
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定义 8 我 们 称 (分 是 一 个 最 小 二 乘 问题 ， 其 解 称 为 线性 
算 子 方 程 (D 的 最 小 二 乘 外. 

可 以 证 明 , 最 小 二 乘 解 总 存在 , 但 也 可 能 有 无 限 多 个 ， 在 
(DE RE ih, 具有 极 小 范 数 的 解 则 总 是 唯 -前 。 

定义 & 具有 极 小 沙 数 的 最 小 二 乘 解 ， 称 之 为 线性 算 子 
方程 (1) HUMO T mi, 

于 是 便 有 

4^ 求 线性 算 子 方程 (1) WR k CERERI A 

以 上 我 们 提出 了 四 类 线性 算 子 方程 的 求解 间 题 ， 关 十 各 
类 问题 的 解 的 存在 性 和 唯一 性 问题 , 以 及 其 ERR, Sume 
以 后 依次 予以 讨论 .。 


$2 相符 方程 求解 问题 和 相应 的 广义 逆 算 子 AT 


9-1 线性 算 子 方程 的 相 容 性 条 件 和 解 集 的 构造 
WRN Ti CD 存在 有 解 y, W 
a b= Ayet", 
这 就 是 说 bE 级 (4A)， 反 之 ， 车 5 局 于 算 子 和 的 像 空间 
ACA) BRIED VER, NETAHA AERE 
定理 1 线性 算 子 方程 (1 为 相 容 的 充分 必要 条 件 是 
BERCA). 
为 了 弄 清楚 相 容 方程 (1) 解 集 的 构造 ， 我 们 先 来 考虑 得 
(了 ) 相 联系 的 齐 次 方程 
Aw=0. 
显然 ， 这 个 齐 次 方程 的 解 集合 是 线性 算 子 和 4 的 零 空间 
A (A). 
EH? WEG. 为 相 容 线性 算 子 全 03 SAR, HU 它 
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的 所 有 解 的 全 体 构 成 线性 流 形 
tN (A), (8) 

证 明 在 4 的 零 空间 .A(4) 中 任 取 一 个 向 量 &， 显 然 

有 
(oo 十 2 = Áx =b, 

这 就 是 说 ， 疝 量 rotu 也 是 相 容 方程 (1 的 一 个 解 ， dig 话 
说 ,线性 流 形 (3) 中 的 一 切 向 量 都 是 方程 (了 的 解 。 

现在 我 们 来 证 明 方程 件 的 任何 一 个 解 oe, 都 属于 线性 流 
WB). HX vo, ç 都 是 方程 人 BUR, MA 

Axo=b, 
Aa b, 
两 端 分 别 相 减 便 得 到 
A(a— mo = 0, 
这 就 证 明 , 向 量 人 和 wo Z2: e — C.A (A), $ 
u= 2-—@ə, 

便 得 到 一 Wo 二 TUE {xot CA), 

从 而 定理 得 证 ， 

JE dim Z2 CA) =r, M dim. (A) —s—r,— 出 此 可 知 ， 
著 从 4) 中 选 定 一 个 基底 二 , us, e, uuu, RUOPRICD S 
任何 解 w 都 可 以 唯一 地 者 示 成 ^ 


n=r : 
E= Wo ^2) G; U, a.C €. (4) 
i= 


e TRESCOIKZRSRESNBEMI NEATA -(— 

HFR n x n 阶 线性 方程 组 求解 , 如 果 系 数 矩 阵 4 非 
Aris, HUI DU SCR PE 4 把 解 表示 出 来 。 为 了 把 这 种 思想 
推广 到 本 章 所 考 霸 的 线性 算 子 方程 ， 我 们 先 对 空间 Z" 作 适 
当 的 直接 和 和 分解， 当 线 性 算 子 和 4 给 定 以 后 ; 它 的 零 空 间 
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N (A)dusutu T. 今 假定 子 空间 8 是 MICA) 的 一 个 补 空 
HH, 一 般 说 来 , 它 不 一 定 是 人 (A) 的 直 交 补 空 间 。 这 时 便 有 
相应 的 直接 和 分 解 I 
@"=S@./ (A). (5) 
因为 dim Z2(A) —r, dim ^ (A) 一 n 一 7, 所 以 
dimS=7, 
Bil, 子 空间 S 的 维 数 和 人 象 空间 aA) 的 维 数 相同 . 所 以 子 空 
闻 8 和 子 空间 CA) 是 同 构 的 ， 
定理 3 我 们 有 以 下 两 个 基本 关系 ， 
1) AS= ZCA); 
2) 映射 A 从 5 到 级 (4) 是 一 对 一 的 ， 
WEBB 1) BR ASCA). 4 RBEUEBI, 对 级 (4) 中 
任意 的 向 量 y, 总 存在 向 基 CS 使 Ax-- MT, 
Es y € ZCD, MARE z€ V^, 使 Az= y. IBI] z 
Tf 8E — 3636 28 XR 
Z-Uü--v, 
其 中 ES, ENA). 所 以 
Az= A(u--v)- Au- y. 
这 就 证 明了 8 PREK S y XS BD iE u, W B RI XF Bi 
u 还 是 叭 一 的 ， 
. 2) 现在 只 要 证 明和 ZCA) 中 两 个 不 同 的 向 量 纺 和 2 
相应 的 u, 和 aa (它们 都 属于 中 也 不 相同 就 行 了 ， 
BA Am -gyi Au,= Y, 
所 以 At 2) = 9,— 9.70, 
BK P] SI wu. KAER TRA A AS 3) ZA) 是 一 对 
一 的 , 即 是 双 测 单 值 的 ， 证 些 . 
在 这 个 基础 上 , 我 们 就 可 以 证 明 


定理 4 EZ(A) Liersfwk-Ó À 的 道 算 子 G, EE 
CA) WUR S S, I H. G 是 线性 算 子 .. 
证 明 XPEPS—T uC 2(A) 都 存在 唯一 的 问 量 CS 


Ax=y, 
Gyg- x, (6) 
SURGE ARRIT, 其 定义 域 为 ACA), ARNS, ns 
子 空间 S 确定 以 后 , AT G 是 唯一 的 . | i 
现在 我 们 来 证 明 @ 是 一 个 线性 算 子 。 因 为 , 若 - 
CI 一 024， GYs= es, yu, JC RCA), wi, vC S, | 
WS] E REA AC a, 0o, 由 于 Az;= 9i, Axa yo EB. 
A (ait aLa) = o: Aa, +a Az. = a ted. 
所 以 Gnade aY) — ori w= 04634 4-05 G Js, 
因此 , 算 子 @ 是 线性 的 . IEE, 
定义 5 前 面 定理 中 的 算 子 G, 称 为 算 子 4 的 一 种 广义 
XET, WE A,R 
G-A4-, 0) 


H2-1 JUGE OGERCE G= A7 的 示意 贺 
这 里 还 要 着 重 指出 ， 前 述 定理 说 @@ 是 唯一 的 ， 但 这 是 指 
当 子 空间 8 给 定 以 后 。 由 于 构成 空间 C 直接 和 分 解 的 子 空 
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间 S 并 不 是 唯一 的 ， 放 不 同 的 S， 相 应 的 广义 逆 算 子 如 也 不 
相同 ， 因此 ， 对 线性 算 子 A 来 说 ,广义 逆 算 子 A 不 是 唯一 
m. 
有 了 广义 逆 算 子 G, 相 容 方 程 ( 的 解 便 可 以 表示 为 

x= Gb, 

m= A`b, (7) 
BE 车 线 性 算 子 44 XE Hi rank(A)—^, jx B$, 
dim (A) —0, 而 零 空间 .人 (4) 中 除 零 向 量 外 无 任何 其 它 
向 量 ,同时 , dim 8 一 ,于 是 


或 


S= 6”, 
这 时 , S 具 能 有 一 种 选择 ， 对 于 一 切 2EY', 恒 有 c 
GAx-z, 
所 以 | i 
GA- I, (8) 


了 为 从 €" 到 G^ 的 不 变 算 子 ， 因 此 , 可 以 称 @ 是 A 的 左 道 ， 
23 广义 逆 算 子 A 的 特征 性 质 一 -44-4 一 及 
现 设 G 为 空间 €^ 的 某 一 种 直接 和 分 解 (6) 所 确定 的 线 
性 算 子 A 的 一 个 广义 道 算 子 4-， 任 取 一 向 量 eC gr 令 
m@m=tu+bo UEN, VE (A) 


及 b= Ax -— Åu, 
于 是 便 有 f Gb —u, 
从 而 便 有 


AGA«- AGb- Au- A(u iv) = Az 
于 是 ,对 一 切 wEG" 恒 有 
(AGA — A)2—0, 
因此 便 得 到 关系 
AGA — A, (9) 
反之 , BG AgdkCCA)EWI—AASENT, 其 值 域 
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dr e" s, BI 
a (Gee, 
URIET G WERE (DI G DARENT 入 的 一 个 广义 
逆 算 子 4-， 今 证 基于 下 . 
没 DE:%(A)，Aw=b， 于 是 


AGAx — AGD, 
但 是 ， GAa -- Gb, 
所 以 AGAw = AGb — Ax — b, 
这 就 是 说  A(Gb)=b, 


所 以 , Gb 便 是 相 容 方程 (全 的 一 个 解 “从 而 可 知 G E: A " 
一 个 广义 道 算 子 A, 
定理 5 MELET- A- 的 特征 性 质 为 


AA-A — A, 
推论 GA 是 一 个 等 寡 算 子 ， 
因为 (GAY -GAGA-GA, 


出 此 可 知 ,G4 是 一 个 投影 算 子 ， 实 际 上 它 是 从 西 空间 i 
FARNA 到 子 空间 8 上 的 投影 算 子 ， 


$3” 相 容 方程 的 极 小 范 数 解 和 广义 逆 算 子 A= 


3-1 - 相 容 方程 的 极 小 范 数 解 和 于 空间 8 的 选择 
现在 我 们 假定 Gs 荐 由 子 空间 8 所 确定 的 算 子 入 的 一 
ALEAT Ac, XXI, 相 容 方程 (了 D 的 任 一 解 “都 可 唯一 
地 表示 成 E 
26— t£-- €, 
HR UES, vc. CA), iiu BER)" LEAF Gy 所 确定 的 
HR, E u= Gb. [3 3s CD 的 解 的 全 体 为 线性 流 形 
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g+. A (A). 
所 以 首先 的 问题 就 是 求 ec MICA), Gl 


æ= {w+vl= 极 小 , (10) 
为 此 目的 ， id ac 3 R W.W T BLAS 8L EE RS] I 
= (o 4- Puit) + (U — Puca), (41) 


因为 Pra RAS spi €"3).47CA) 上 的 直 交 投影 算 子 ， 所 以 
Prat — Prat) == 0, 


这 就 是 说 €g—P' a a tE NT(A), 
X, Pra Vi Pa tD = 5+ Prad, 
VIRI I vA- P, Aa €. (A). 


于 是 便 证 明了 (11) 右 端 两 个 向 量 的 直 交 性 , 即 
(o - P. a t) | C7 P. A. 


Mani 38 (14824 
jæ P= Ie Prau’ [u - P, u]. (2) 
KpE, 25 v4-P,,u-0 
Bj, [m ARN. Rf | 
q—u-—P,ou-(I-P,)u, (13) 


其 中 的 了 为 从 v" 8I v atas ET, E E- Pra 是 Pra 8 
补 授 影 算 子 , 即 , 它 是 从 空间 C 到 子 空间 .f CA) ERU BE 
HERT. 这 就 是 说 , 相 容 方程 (1) (对 给 定 的 右 端 从 的 解 mw， 
HERTAN Am, 它 的 范 数 为 极 小 , 反之 亦 然 ， 

从 上 述 讨论 可 知 , 欲 使 Gb 对 任意 的 如 都 具有 极 小 范 数 ， 
必须 且 只 希 选 信人 (A) 作为 子 空间 5 即 可 ， 这 时 空间 外 dd 
直接 和 分 解 为 

Qn (A) (A) (14) 

这 种 空间 分 解 所 确定 的 算 子 4 的 广义 道 算 子 G, 我 们 把 

它 记 作 Az. 
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g= A;b 5) 
48 RAE AERE CD 的 极 小 范 数 解 ， | 
如 果 算 子 4 为 满 秋 ， 这 时 空间 分 解 无 选择 余地 ，4- 和 
Az 完全 相同 . 


图 2-2 MENUA T AZ 的 示意 图 
3-2 4; 的 特征 性 质 
央 为 A; 同时 也 是 一 个 4-, 所 以 它 也 必 满 足 关系 
AAA=A, (16) 
此 外 , 前 面 已 经 讲 过 , GA 是 从 空间 CHEATER MNA) 
到 子 空间 8 上 的 投影 算 子 , 即 ， 它 是 一 个 等 宕 算 子 。 对 于 AL 
来 说 , 由 于 确定 空间 分 解 的 子 空间 为 
S=. (A), 
所 以 ATA EA ECI NA 上 的 直 交 投影 算 子 。 
这 就 是 说 f 
GA-—P,. 4 7) 


因此 , (826 1 3€ 3838 18 n, GA 7S ELPESECT, El 
| (GA)'= GA. (18) 
BEZ, WRA ZCA)SISSIE 6" 的 线性 算 子 G 满足 条 件 
AGA=A, (GA)'-GA, (19) 


则 忆 必 基 一 个 An 
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;这 里 我 们 还 要 指出 ， 算 子 @ 的 定义 域 是 AA), 而 并 不 
是 整个 空间 Em。 对 于 广义 道 算 子 47 来 说 ， 由 于 空间 分 解 
(1 多 是 唯一 的 ， 所以, 作为 从 2 CAD 到 Z" 的 线性 算 子 来 说 ， 
它 是 唯一 的 ， 如 果 拒 @ 的 定义 域 从 级 (4) 扩 张 到 整个 空间 
Ym， 这 种 唯一 性 就 消失 了 


84 矛盾 方程 的 最 小 二 乘 解 和 广义 逆 算 子 A 


41 广义 逆 算 子 47 的 扩张 ; 

WAR yE OD Gr ga OFAT aA) 时 , 方程 (D) 
没有 通常 意义 下 的 解 。 在 $1 中 已 乡 RWA, 这 时 可 以 考虑 求 
公使 

14z -ò| — tj (2) 
的 问题 ， 空 间 分 解 
(fus pude (5) 
BREAD X G=A-, HEX H ACAD, 而 现在 
be ZA), ML Gb MM 为 了 构造 与 问题 (2) 有 关 的 广 
LAAT G, 首先 需要 把 G 的 定义 域 从 ACA) SERIEM EE 
BJ €". 为 了 这 个 目的 , 我 们 先 对 酉 空间 V" 作 直 接 和 分 解 
| fr RAOK, <20) 
其 中 多 是 ”的 一 个 子 空间 ， 著 dim Z(A)=r, mj 
dim Z=m— m. 
这 时 , V" rB WJ E T EL Et b drap PARE — Hi EU. 
b=b +b, bE RCA), b.c v, 
车 设 G 为 空间 分 解 (四 所 确定 的 一 个 广义 道 算 子 44-, 则 a, = 
Gb, 便 是 相 容 算 子 方程 U 
Ac —b, (21) 
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在 遂 常 意义 下 的 解 , 即 . : 
AGb, — b,—0, 
从 而 有 l 
| 4x,- 5j = | Aw; — b. b. | = | b;]. (22) 
这 里 的 b, KREME b dgzs [RI i (20) Bra sc 80 A € Ya 
子 空间 ZODSERZN Y EBIEETPSEEPTRUUE 
b,= Pb (23) 


— 8UD 
B 2-8 l l 

Jue Sit - 5x65 moti |b.) = 极 小 ,应 如 何 选择 6 
的 子 空间 % 以 构成 空间 的 直接 利 分解 ， 当 子 空间 多 按 这 个 
原则 确定 以 后 , 我 们 再 把 空间 分 解 (5) 所 确定 ERI 义 道 算 子 G 
按 下 法 加 以 扩张 ， 

对 一 切 b—b,--b.C €", £ Gb= Gb, (24) 

这 样 扩 张 以 后 的 广 KAHT G, SERA RORE (2) 
WRT ULAT. ` 

O E RREA TII, 为 了 解决 这 

司 题 ， 我 们 可 以 从 $ 3 中 讨论 构造 Az ARE TO 间 分 解 中 
得 到 月 发 

Ep SENEC bo 分 解 成 两 个 直 交 向 EZ. 
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b= (b. — Pub) PSU 
因为 D1E CA), BEA Pec b:= 0, ATAA 
b.— Pana b= ba — Paora bs = (一 Para) ba 
= P, a bs E ACA), 
因此 有 (bs — P, b) Pag)b. 
这 就 证 明 , (20) 3S B PE TEB 22. TÆ 
[bs] = | bs — Ps bI? 1 P abl. 
Ribl 为 极 小 ,从 (26) 显然 可 知 , 其 充分 必要 条 件 为 
02 一 到 ab = 0, 
b, P... 
换 句 话说 , 56s 应 为 向 量 5 在 统 +(4) 上 的 直 交 投影 . 


By 


(26) 


(2T) 


根据 这 一 段 讨论 可 知 ， 如 果 要 想 对 任意 给 定 的 BE2m 


都 使 


| AGb —b| =), 
则 为 确定 G 应 选 子 空间 
4-2 (A), 
并 规定 ; 当 bc A CADRE 
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(28) 


这 样 扩张 后 的 算 子 G, 它 的 定义 域 便 是 整个 空间 €, EME 
我 们 所 需要 的 广义 道 算 子 . 
上 图 说 明 前 述 讨论 的 几何 意义 。 对 一 般 选 择 的 子 空间 
U, b 沿 子 空间 AAE 多 上 的 投影 为 区, 而 沿 多 (4) 到 
ZA) 上 的 投影 为 ga, 显然 有 bu <1551.. 
定义 6 按照 上 述 方 法 所 确定 的 线性 算 FAJ n 
ATG, EA. ' 
AUERIHERVERT G— A; 的 方法 归纳 于 下 
一 步 ， 给 定 空 pi E" 的 直接 和 分 解 
~S@.N AY, | (5 
据 此 确定 从 ZAE ç 的 广义 逆 算 子 G= 4- 
第 三 步 ， 对 空间 2Z* 作 直接 和 分 解 . 
€"— 22A) 2: (A), (29) 
把 所 得 的 广义 逆 算 子 G 的 定义 域 扩张 到 整个 空间 ë= E, 规 
定 
Gb- G(b,--b;) -Gb,, bE 2-2(A), b,c2(A), (30) 
RAREST LEATA. 从 前 述 过 程 可 以 看 出 ， 
(B) 中 的 子 空 间 S 仍 为 一 可 变 因 素 ， 它 的 选择 不 是 唯一 的 , 因 
而 所 得 广义 逆 算 子 G 也 不 是 唯 - -的 


图 2-5 确定 Ar 的 示意 图 
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定理 6 LEAT G-A 是 线性 的 . 
证 明 Db. b 为 V" PIPER EIER. < 
be bo +by, 
BOEZA), bPEB'(A), 1 
根据 他 的 定义 可 知 
| Gb= Gb 88, ¿=1, 2, 
所 以 ,对 任意 两 个 复数 oa 和 os EA 
G (o4 b, aa ba) =G (o bP + o bí?) , | 
Eg y as ba b C B(A), BAE 2(A) E G TREE RO, Br 
以 


¿= 1, 2, 


G (o; b? + a b) = a Gb$ +a GOP = atb- as Gb; 
从 而 可 知 ,定义 在 €" 上 的 算 子 G 是 线性 的 ， 证 毕 ; 一 
42 法 方程 | | 
根据 G= Ar 的 定义 可 知 , 35 
b=b.+-b,, bE H(A), bE ZCA), 
则 . AGb= Pab. i 
这 就 是 说 ， x= Gb 237588 C) BJ SIN 二 乘 解 的 充 分 必要 条 件 
' Am,- Paap, “l. `" 
据 第 1 章 5-8 AKT), (na ROT 
. (A) (AD, 
b;= P naob.  . (21) 
因此 , 若 wi 为 问题 (2 的 一 个 最 小 二 乘 解 ， DU 
A* (b — Ax) = A'b, —0, 
BU i 满足 方程 
` A*(b— Aa) - 0, 
把 向 量 6 分 解 为 ， 
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所 以 


b= Paad Pub, 


型 有 

A'CPab— Ax; Pu aub) A" (P. ,b— Agi) =0, 
但 Paabo Ax EALA), 
BENE Ac, P. b, 


这 就 证 明 €. 是 讨 题 (2) 的 一 个 县 小 二 悉 解 . 
根据 以 上 讨论 , 我们 有 | 
定理 了 ke 为 问题 (2) 的 一 个 最 小 二 乘 解 , 其 充分 必要 
条 件 为 
400 一 4r) 一 0. (31) 
定义 了 我 们 称 (31) 为 线性 最 小 二 乘 问题 (2) 的 法 方程 ， 
4-8. P XC ECT. 4 的 特征 性 质 . | 
前 面 所 定义 的 广义 道 算 子 G= Ar, EU AC, BE 
必 满足 关系 
AGA-A,- 
此 外 , 由 于 对 任何 5E Ym, 恒 有 
AGb — Panb, 
所 以 ， 乘 积 算 子 AG 实际 上 就 是 从 多 ”到 子 空间 :多 (4) 上 的 
直 交 投影 算 子 . 因此 ，AG 不 但 具有 等 知性 


(AG? - AG AG = AG, (82) 
RU EDS \ 须 具有 自 伴 性 , BI U 
(AGY = tsm UL DE (38) 


反之 ,对 于 任何 一 个 从 v Z ARRET G, ax 
CWERR(82)~ 83), M G 必 为 一 个 4 

定理 8 J v" 8| v 内 的 线性 算 子 @@ 是 一 个 4 的 充 
分 必要 条 件 为 (32) 和 (83) 成 立 . "5 

关系 (32) 和 (38) 就 是 广义 逆 算 子 Ar 的 特征 性 质 . 
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5-1 空间 分 解 的 选择 和 广义 逆 算 子 At 
设 线性 算 子 好 为 空间 Z?" 和 € Wa Boma se 
d — SQ. CA) 
C=H AXE CA) 
FRERET AD. AUR 
rank(A)- n, 
这 时 dim M (A) —0, 从 而 
S= = 
从 而 子 空间 总 无 其 它 选 择 余地 。 否则 的 话 , S 的 选择 有 无 限 
多 种 ,而 不 同 的 选择 ， 所 确定 的 广义 逆 算 子 Ar 也 各 不 相同 ， 
HI, 对 固定 的 向 量 b, 随 着 子 空间 8 的 不 同 选 择 , 最 小 二 乘 
解 Gb 也 不 同 ， 但 是 , 根据 前 面 的 讨论 , 不 难看 出 ，4w 一 5 的 
最 小 范 数 总 为 
| Pau b]. 
另 一 方面 , Bi GRBA BJ pj RR (2) E CI RUN TREE E= 
Gb, 实际 上 是 相 容 方程 
Ax -= Ps. ab (84) 
的 解 ， 反 之 亦 然 ， 所 以 , 求 问题 (3) 的 最 小 二 乘 解 中 具有 极 小 
范 数 的 解 的 问题 ， 实 际 上 就 化 为 求 相 容 方程 (84) 的 极 小 范 数 
解 的 问题， 根据 53 中 的 讨论 可 知 , 只 有 选取 子 空间 .114) 
作为 5, 才 能 使 确定 的 广 LERT OG, WEARER OEE”, 
Gb 都 具有 家 小 范 数 ， | 
根据 以 上 的 讨论 , 我 们 便 得 出 结论 : 由 空间 分 解 
P= AONA) + (88) 
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@"= HR A DR CA), 
所 确定 的 线性 算 子 4 的 广义 北 算 子 @， 就 具有 所 需要 的 性 
lg, 即 对 任何 0E v", Gb 都 是 方程 
Ar=b f 
的 极 小 最 小 二 乘 解 。 算 子 在 的 这 种 广义 道 算 子 , wA A 
这 里 应 闭 重 指出 , 因为 确定 广义 道 算 子 At 的 空间 分 解 
《35) 是 唯一 的 ,所 以 A* 也 是 唯 -~ 的 . 


图 2-6 Gr GEBOT 4 的 示意 图 
5-2. 广义 赣 算 子 At 的 特征 性 质 
仍 用 G 来 麦 示 算 子 A BO S mk 4+。 因 为 ， 对 于 算 
THR 4% 一 5b, Gb 是 它 的 最 小 二 乘 解 , 即 , 它 是 一 个 A, Br 
以 


AG = Paa, 、 
间 时 , Gb i XE BE BUNTE. iE AZ, 故 有 
GA= Pc. 


TER - i . 
定理 9 车 @@ 是 确定 等 子 方程 极 小 最 小 二 乘 解 的 广义 递 
n T A+, REF FIBI PERS] S 
AG= Psy, GA= Pa. ` (36) 
附注 实际 上 Pac; 是 把 V 映射 到 | I 
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14 CA) — CAT) 
上 的 直 交 投影 算 子 ,所 以 可 把 它 胡 示 成 
P. 8G) P. AÇA”) 。 (87) 
MERER, 现在 ,@ 是 从 E Sy €" 内 的 一 个 线性 算 子 ， 
其 定义 域 为 整个 空间 E”, 
(36) 就 是 通常 所 说 的 Moore 2g fr, 它 还 可 以 表示 成 下 面 
的 等 价 条 件 . 
定理 10 Moore 条件 (36) 等 价 于 下 列 条 件 : 
AGA- A, GAG=G, f 
(AGY*—- AG, (GAY-GA, . (98) 
这 四 个 条 件 便 是 通常 所 说 的 Penrose 条 件 ， | 
证 明 1) Zi Moore & fE (36) 成 立 ， 则 Penrose 2 fF 
《88) 也 成 立 ， . 
因为 AG - Pa, 所 以 
AGA= (AG)A= P, A = A, 
WA GA-Paco,BNAMEB f 
.GAG-(GA)G- P, G = G. t 
又 由 于 4C 和 'C4 都 是 直 交 投影 算 子 ， 记忆 都 是 自 伴 算 
T.H 
(AG)'—- AG, (GA)'—-GAÀ, 
2) 反之 , 若 Penrose 条 件 (38) 成 立 , HJ Moore 条 件 也 必 
AG, GA 都 是 等 寡 算 子 , 因为 
(4G)2=-4G4G=- AG, 
(GA)* —GCAGA-—G A, 
所 以 , AG fu GA 都 是 投影 算 子 ， 根 据 Penrose 的 后 两 个 条 
件 ， 它 们 都 是 自 伴 算 子 ， 从 而 也 都 是 直 交 投影 算 子 。 从 而 可 
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Aj, Moore 条 件 (86) 辣 时 成 立 ， 证 毕 . 
最 后 我 们 指出 ,车 Tank(4)=n， NOS GA-Pao- 
Pacan = Ps ;所 以 ,对 一 切 z € $^, 恒 有 


A* Ar -—a, 
故 必 有 
41+A=JT,. ^ (89) 
HA rank ( A) =m, WJ 
AAt = Fn, (40) 


其 中 的 1 和 ,分别 表 示 空 间 多 * 和 和 g” TBART. 

5-3 At 的 若干 性 质 

1) 有 关 秩 的 一 些 性 质 

1° rank(A*)-—rank(A); 

2° rank(A+A)=rank(AA+)=rank(A), 

证 明 - 因为 CA) — 471 (A) - 4 (An), BOR 

1* dimZ(A*)—dim FLAN = dim %(A)= rank(A). 

27 @(AtA)=Z(A*), Br D) 

dim #(A+A)= dim (A47) = rank( A). 

HEU. 7 dimZ(AA*)-rank(A),. 

2) 根据 Penrose 条 件 可 直接 验证 下 列 美 系 式 成 立 ， 

8° (aÅ) =a iAt, a#0,; 

(4^ (A*5*-(A?)*, 

5° (UAV**-VA'U',U, VAASA CEM 
HAT. 

3) 乘积 关系 

6° A*AA'— A'AA* = A*. 

T^ AA'A**— A'54* A— A, 

证 明 AtAA"= P, @ A"= A"; 
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X, (A*'AAS'- AAA = Prw ÁA, 
所 以 . AAA =A, 
ik 6^ 得 证 ,把 6° piss Ex FR CO BE RETE T.. 
8° (A'A)*— A* A**, 
9° (AA45*- A'* A*, 
根据 Penrose 条 件 并 利用 关系 0? ~T, 可 直接 验证 ， 
4) 满 获 算 子 的 广义 道 
10? $Æ rank(A)=n, M} 
| A*— (A' A) A", 
11? 车 rank(4) =m, WJ 
At= A'(AA*) 71, 
3x RS CAT A) 71 S8 (A As) 7 y E KV. m e, mm om 
上 的 满 穆 线性 算 子 A'A p AA 的 道 算 子 , BB 
(A'402(A' A) - (A*A) (AA) 1L, ` 
(AAN (AA = (AA) (AA) = In, 
证 明 $65, 
4 
因为 AA 有 逆 算 子 (ATA) P, MEERE AM 端 便 得 到 
10°, BR, ETA 
AA'A**— A, 
而 AA 有 逆 算 子 (44 7 用 它 左 乘 上 式 两 端 并 作 运 算 " 便 
48211. um 1 
特例 UA 为 从 EKA 的 线性 算 子 ， H 
rank(A)-—1, 
则 ÁA* — (A* A) A", 
E AAN CA € nzerk CT, n 
At= A (AAE 
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在 第 一 种 情形 , 因为 4 是 一 个 从 €* 到 VO 的 线性 算 
F, 它 是 一 个 复数 , 而 由 于 renkCA* A) ^rank (A) =1, 所 以 
A'A «0. 在 第 二 种 情形 , AA" 也 是 一 个 异 于 零 的 复数 ， 在 
B 8l 党 标 系 以 后 ， 我 们 将 要 看 到 第 一 种 情形 的 算 子 可 以 
用 一 个 % 维 独 向 量 来 表示 ,而 第 二 种 情形 的 算 子 4, 则 可 以 用 
一 个 % 维 的 行 向 量 来 表示 .。 在 两 种 情形 , A'A 以 及 AA* 38 
TURIS T) HEB SE CET. 

6-4 SER AB MT" ZAT 

在 线性 代数 中 , 我 们 已 经 知道 , 车 A, B 是 两 个 ”xm Br 
非 奇异 方 阵 , 则 有 公式 

(AB):-B-3143, 
对 于 广义 道 算 子 来 说 , 公式 
(AB)* —B* A* (41) 
是 否 仍 然 成 立 ? 

WR B= A", k A— B", 根据 前 面 的 性 质 8° —9°, 可 知 
公式 (41) 成 立 ， 若 rank《(4A) —rank(B)-r,mi A 8 B 5j 
为 从 Z" ad e, 各 从 V" 3) 4" 上 的 线性 算 子 ,这 时 , 由 于 

—(A'A) ^A', B* - B'CBB*y3, 
KEEA A AT 也 成 立 、 但 是 ,在 一 般 情 形 ,公式 (41) 
TUR. BEA, ER A — [1, 01, B=[1, 117, 则 易 知 
(AB)*—1, BAL, 


所 以 二 者 不 等 . 

这 就 说 明 乘积 公式 (入) 有 时 成 立 , 有 时 又 不 成 立 ， 现在 
我 们 来 考虑 公式 CD 成 立 的 充分 必要 条 件 是 什么 ?现在 " 
知道 ， ER 要 条 全 可 以 表示 成 多 各 形式 , 在 本 节 中 我 们 只 
出 其 中 的 两 称 ， 


SHA, E Ayu] | C pJ V" TUM. €" 3 €” RER 
+, WJ AB HA "到 v" 的 线性 算 子 ， 

定理 11 ”乘积 公式 

(AB)* — B* A* (41) 

成 立 的 一 种 充分 必要 条 件 为， 

G) A*ABE'A" = B B*A* 

Gi) BB+A'AB= A'AB 
同时 成 立 ， 

证 明 设 条 件 G) (i) 都 成 立 ， 用 B+ ACAB) DiE 
ER A*ABB'A' 得 

B'A*ABB' A (ABy* = B AF(ABY(AB)'(AB)'* 


(AB) (AB)' (pAB)'* - AB. 
所 以 B*A* (CAB (ABY (AB)" —B* A* AB, 
男 一 方面 
B+ (BB: A") (AB)' + 一 - (B BBA (ABy- š 
BA AB)" = (AB)'CAB)'*, 
FE, (AB) (AB)'* 的 自 伴 性 得 
B'A*'AB—(AB)' (AB) = (AB) (m. (a) 
对 (i) 两 端 再 作 运 算 *， f et 
B'A"AB:: B" = B" AA. 
HAt, (AB) 分 别 右 、 左 乘 两 端 得 
(AB)" B'A'A5' B'A* (AB) (ABI AB" I AT. 
—-(AB)* ( AB) A(BB*)' A* 
—(AB)' (AB)'CAB)B* A* = ABB A*, 
又 (AB)'* B'A'AA* (AB) B'A*.— 
-(AB)"(AB)'—-(AB) (AB), ` 
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Berl 


ABB*A* -(ABY(ABy:, (b) 
Ca LRILCb) 4381 RT 1 3 N IDE RO AT 
(iii) B* A AB — Prager, 
v) ABE*A* = Pap. 


这 与 B*4* 为 (和 4B)* 的 Moore 条件 相似 ， 据 此 ,我 们 可 以 
证 明 线 积 公 式 成 立 (参看 附录 2). 
反 过 来 , 假定 乘积 公式 成 立 ， 因 为 
(AB)*CAB)  ABY - (ABY, 
B'A*—B* AABB'A', 
IEGRBEABEBOGRHBBB-HBGAS — 
ABB'BB'A*-AB(B'BB')A ABB'A* 
—ABB'A*ABB'A', 
所 以 ABB'U AA) BB'A-0 
AA I-—- ATA DS SECRET. , 从 而 上 式 可 以 表示 成 
ABB'(I—A*AYBB'A* 
—[ABB'(I — A* A [ABB (I — iar -0, 
从 而 可 知 G-AUA)BBSAÀ-0, 
这 就 证 明 条 件 ( 蕊 臣 立 。 仿 此 可 以 证 明 条 件 (让 也 成 立 ， 
ich. 
根据 这 个 定理 可 以 证 明 oo 
定理 12 乘积 公式 (41) 成 立 的 充分 必要 条 件 为 . 
1° BB'Z(A'cAZ(A*, 
2° A*AZ(B)cAZ2(B), 
证 明 设 条 件 4° 成 立 , 则 对 任何 向 量 w， 
BB'A'xcaz(A*). 
T ATA = Paan Bp DL 
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A*ACBB' Ax = P; ,,(BB'A'x) -(BB'A*)c, 
Tb ERI AEG) E 
JE, A 2” 成立， 可 证 条 件 人 ) 也 成 立 . 
这 就 证 明和 条件 1%、2” 是 充分 的 . 
BU ES G) GO 3r, AVE 1° 82? IBD xr. 
REGTE, HER ov 
P, a B B'A m BBA, 
Erb BB'Z(A»5caz(A"), 
EG 5b, ZRTE (3) REEL RC YT Ef mn 
Poo AABE = A ABz, 
可 知 A'AZ(B)C AB), 
这 就 是 说 条 件 D 2^ 都 成 立 , 因此 10 和 2° 也 是 必要 的 ,证 毕 . 
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6-1 NERF 4- 的 矩阵 素 示 
本 节 总 假定 级 是 从 西 空间 C^ 3j <= Wap 
T. J XK A 是 由 空间 V" 的 直接 和 分 解 。 

、 —M'(A)OS (42) 
廊 确 定 的 , 它 的 定义 域 是 V 中 的 一 个 子 空间 22A) , EE E 
ATENO. TER S 和 2(4) 的 维 数 相 同 , Er 

dim Z2( A) —dim S =, (43) 
这 也 就 是 说 , FETA quof asp Scc v" BOSE RU s= šj (A) C 
<" Wi A i p E Ej “CORA S, 


S — 2(A) (44) 
或 者 说 , AGES LARE - : UD, 而 A7 idees lj 2; S, 


—J107—- 


AS=2(A), A- ra =8, 
3 x€S8,y-À«, W A-y-a. 空间 S 给 定 以 后 ， A- 
不 仅 是 存在 的 ,而 且 也 是 唯一 的 。 dre sH S #I Z (A) h2y 
别 建立 坐标 基底 后 ， MM E 的 方法 把 A- 
用 一 个 ”x7 WDIBEEXIMIBOR. HE 
e, Ca, +e, € fll 05, go, 75, Or (45) 
分 别 为 子 空 间 8 和 子 空间 ZCA)MB—ÍBdkNE, dt 


A gi et enet -ir, 


AÁ ga onaE1 十 aasea 十 十 orsEr， 
人 49 一 cdrel 十 osrea 十 十 arrEr， (46) 
并 设 y € (A), 3 一 和 ,它们 在 前 述 基 底下 的 表示 为 ， 
é1 | ra . 
Weo=| |, Wsv| : | 
f L8 B E 
即 & —£ 6i 0s + Še, 
Y = rH: + tego T Ir. 
JUESATBUS XS 


=A Y =A (mgit ngo mp) = Žas- gi 
-> Dna anje €; —£10, - £404 - y +E, er, 


SPUR e, 的 系数 相等 便 得 到 关系 
SP nan j=1, 2, =r, 
= 


Mai np Ag 
[ £i OJ O32 *** O1, "a |] 
Q1 Qoa *'* (s Y) : 
x= | $ = tu mI (47) 
£, O1 Ara "7 Opy . Tir 


— 7 1` — 


把 矩阵 [e] 记 作 Gu, 它 就 是 在 给 定 基底 下 广义 逆 算 子 A 的 
AREE, 或 记 之 为 
Az =Q. 

在 上 述 些 标 系 中 , 线性 算 子 À ( 定 义 域 看 成 是 S) a pig 
ü bL SERI MAN rxr rie E, BZN Aou, 则 显然 A... EE 
SH 

G,— AZ. 
线性 算 子 A Bs SE LE C, HEREC Dg, JE 
空间 V^" 和 €" 中 都 建立 坐标 系 以 后 ,可 以 用 一 个 mxw r5 
阵 把 它 幅 孙 出 来 ， 而 广义 逆 算 子 A 的 定义 域 仅 为 Gm 中 的 
一 个 子 空间 级 (4A), 其 值 域 为 V" 中 的 于 空间 S, 要 把 它 表 示 
成 矩阵 , 需要 在 有 关 的 子 空间 中 选 出 基底 来 ,这 并 不 是 很 容易 
的 事 ， 另 一 方面 ,在 烽 际 应 用 上 , 我 们 直接 考虑 的 对 象 往往 是 
线性 算 子 的 和 矩阵 表示 .表示 算 子 A BE mx Mr, dd 
把 A- 的 定义 域 扩 张 到 整个 YZ"， 那 么 ，4- 便 可 以 用 一 个 
nxm GERERE R, 现在 我 们 在 原则 上 给 出 扩张 定义 域 的 
62 广义 逆 算 子 4- 的 扩张 和 广义 逆 矩 阵 A 
ATI LAAF A 的 定义 域 从 ZA) 扩张 到 整个 空 
间 YG"， 并 设法 用 一 个 ”xm 阶 和 矩阵 把 它 表 示 出 来 ,首先 对 空 
间 Z” 作 直接 和 分 解 
q?-9(AYO, (48) 
其 中 dim 4-—m-—v, 在 空间 C # @ 中 分 别 取 
€i, =", €, # gi, gm 
fE EFREN, 为 便于 讨论 ， 并 假定 : 
€i, €a, =, €, 为 及 的 基底 ， 
Eris t, €n 8 ACCA) 的 基底 ， (49) 


81, Gz 75, Gr Jy UCA NE, 
Deri s See, s Dn 为 V RESTI 
今 规定 
Á u= A (ity =A Yn (PEHA), y. € V, ) (50) 
这 就 是 说 , WH daj B: auc, tgAuw-0 xHEdA- 
的 定义 域 扩张 到 了 整个 空间 C” 上 ， 并 且 扩 张 后 的 算 子 仍 为 
在 上 述 基底 下 ， 向 量 wES, y € ZCA) 的 坐标 向 量具 有 
以 下 特殊 的 形式 ， | 


ri 


I 1 B Tii 
æ=] & i, =] m (81) 
0 0 | U 
(10. lo. 


根据 用 矩阵 表示 线性 算 子 的 一 般 方 法 ，4- 便 可 以 用 一 个 


质 : 
[à] 
t - i; 
"a | : | 
as : |= Š, 了 
Los] 9 
Lo] 


dH, $, £s, NP £, 与 naa, Npa, t0, Nm AX, 因此 ， 在 前 
述 坐 标 系 的 特殊 选择 下 ，.47xxm 的 形式 为 


M 
ool 
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如 时 在 vg Z” ipa spes {e 和 {gy} 作为 坐标 基 
底 ,在 这 两 个 坐标 系 直 向 最 > 和 f ART C A ur 和 U. 
设 新 旧 举 标 商 后 之 间 的 关系 为 

gz. == Yu. E Yg = Qu,, 
TZEI B Abs SIB, Ass 的 形式 为 
G ° 
P | Q, 
lo 0. 


_ 


Hop POR QAM Ep oon Br m xm BF Ey Se4g BE, RRE 
— 4 non MER, 
现在 我 们 假定 ， 在 空间 Z" 和 Vp IL T ERRUA, 
线性 算 子 AUI) S ICT A 的 矩阵 表示 分 别 为 4 和 
4-, 我 们 便 称 A 为 矩阵 4 的 一 各 广义 着 矩阵 ， 由 于 线性 算 
子 乘积 的 矩阵 表 永 ; ARARTEKOA, 所 以 刻 划 广义 
道 矩阵 4- 的 特征 性 质 便 可 以 表示 为 
AA-A=A. (52) 
EE aW b RJRdE BOXE an g tE BJ ART Et, 4-6 便 是 相 容 线 
性 方程 组 


的 一 个 解 . : 
6-3 广义 道 算 子 AL 的 矩阵 表示 和 广义 着 矩阵 AG 
对 于 广义 逆 算 子 An, 可 以 通过 与 前 述 完 全 一 样 的 方法 用 
矩阵 表示 出 来 ， 这 时 , 由 于 确定 算 子 AS 的 空间 分 解 为 
一 4) 外 .AL(4)， (53) 
MERTENS 只 能 取 为 .人 1(4), 无 其 它 选择 。 如 果 分 别 在 
子 空间 N CA) m CA) 中 建立 举 标 系 ， 4; 就 可 以 唯一 地 
表示 成 一 个 +x" 阶 的 矩阵 G,。 这 个 矩阵 还 是 非 奇异 的 ， 如 
果 仿 前 把 算 子 Ar 的 定义 域 扩张 到 整个 空间 V^ 上 , 即 对 Gm 
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IE RAE 


Gn A). (64) 
于 空间 wiRORCA) 的 一 个 补 空间 ， 其 维 数 为 m-—r, 它 有 一 
ERERCE XAF, RA 多 中 的 同 量 2, 规定 


An Uit Ya) = Any PLEZA), YE T, 
就 完成 了 算 子 A; 的 扩张 ， 如 果 在 空间 CA C rh $s 
标 系 ， 算 子 AL 就 可 以 唯一 地 表示 成 wxm 阶 和 矩阵 ， 记 之 为 
An ADAT An 具有 上 以 下 的 特征 性 质 : 


AAA =A, | 
(A;A)'— Az A, | | 9) 
BC A; 的 矩阵 表示 An 也 具有 相应 的 特征 性 质 ， 
AALA-—A, c 
CAAY Caza, | G) 


这 里 的 记号 A, ALQSUERUETCEBIABPESER, CNA 31 
m x n Erg nx m 阶 . 记号 ( ) 在 (55) 中 表示 求 伴随 算 子 ， 而 
dE (06) F 2E ERIS n SE 

JT ALA 是 6" 到 .人 (A) 上 的 家 交 投影 算 子 ， tiis 
阵 表示 ATA 便 是 相应 的 投影 矩阵 ， 对 于 以 4 为 系数 矩阵 的 
线性 方程 组 Am =b 来 说 ， ABERA), w= Arb REER 
极 小 范 数 解 , 

6-4 广义 递 算 子 Ar MERRTE XE RE Ar 

JSURZFIESLT A Am=b WRIST OR T 
Ar 决定 于 下 列 空 Pu 

=. (AJOS, 
P aC) OH D, - 

和 A" 的 情形 一 样 , 子 空间 8 也 有 一 定 的 任意 性 , 而 空间 Z” 
的 分 解 是 完全 确定 了 的 , 所 述 算 子 方程 的 最 小 二 习 解 , 实际 上 
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(87) 


就 是 相 容 算 子 方程 
Ax = PauU (55) 
的 解 , 即 我 们 有 关系 
Ar - A Pra. (59) 
由 此 可 以 看 出 , 广义 逆 算 子 Ar, 它 的 定义 域 是 整个 空间 
9 ， 实 际 上 仅 为 广义 北 算 子 ( 定 义 域 仅 为 ZAA 的 一 种 
按 特殊 方式 的 扩张 ，- 
Aib — A (b,-- b.) = Arbi, | (60) 
— Xp b—b.b. b C ACA), b c ZCA), 
和 前 面 一 样 , 在 空间 V" 和 €" 中 建立 坐标 系 以 后 ， 算 子 
Ar 可 以 用 一 个 wxm 阶 矩阵 表示 出 来 , 记 之 为 入 ， 对 于 以 
KRAT A H mxn GERE 4 为 系数 矩阵 的 线性 方程 组 
Ame=5 . 
JUR, ADD 就 是 它 的 一 个 最 小 二 乘 解 ， 我 们 称 A: 为 矩阵 A 
的 一 个 确定 最 小 二 乘 解 的 产 义 逆 和 矩阵 ， 和 它 记 表示 的 广义 闭 
算 子 Ar 一样 ,广义 逆 和 矩阵 Ar 具有 下 列 特征 性 质 ; 
AALA- A, (61) 
(AAT) "n 
其 中 ， AA; 为 直 交 投影 算 子 AA; 一 Pa 的 矩阵 表示 ， 所 以 
我 们 称 之 为 一 个 直 交 投影 矩阵 ， | 
6-0 RRT At BS Ese Ru p XS EBE A+ 
REAT A 的 广义 道 算 子 4 ， 为 下 列 空 间 分 解 所 唯一 
确定 : 
V - A (YO (A), | (62) 
€" - 2 A)O2* CAD, 
` .对 于 线性 算 子 方程 Am =b 来 说 , Atb 是 它 的 唯一 的 极 
小 最 小 二 乘 解 ， 和 Ar 的 情形 相仿 , AT 也 可 以 看 成 是 广 必 递 
ve D — 


算 子 An 的 一 种 特殊 的 扩张 。 实 际 上 , A0 GUROHASECTOT 
程 


Ax- Pawb (63) 
的 极 小 范 数 解 , 从 而 可 知 广义 逆 算 子 At 还 可 以 表示 成 
A* — ALP; (64) 


EARE, 这 里 的 广义 道 算 子 Ar BOE SUUS ZA). 3x 
空间 V", VP" 中 分 别 建立 坐标 系 后 , 算 子 A, At 都 可 以 分 39] 
EIR mxn MER AA nxm pE At, PUANA 
NOB PEM ERRE TREAT. 
Ax=b 

K, Atb RECEBRE B 388. Pç DS At 为 矩阵 A 
HERES P| AREE J^ S Wa ER, BSD Er TA E R E BE 
表示 之 间 的 关系 ,4+ 具有 下 列 特征 性 质 : 
AAtA=A,  AtAA* — A*, 
(44*)' - A4*, (A* A)* 2 A* A, | 
44 = 一 Pa AT A- Paus , (69) 
这 里 的 Paw 和 Praw 分 别 为 直 交 投 影 算 + Poa 和 Paas 
的 矩阵 表示 , EET EARN EE 3 38 55 E, 

我 们 称 At 29358 BE 4 的 Moore-Penrose j^ XC Xs, 


(68) 
或 


S 7 一 些 特殊 和 矩阵 的 Moore-Penrose 广义 逆 


本 节 我 们 将 列 出 一 些 特殊 和 矩阵 的 Moore-Penzose 广义 
2, 由 于 证 明 都 很 容易 , CAR, 

我 们 假定 在 今后 所 考虑 的 西 空间 中 都 已 选 定 了 标准 直 交 
基底 , 建立 了 相应 的 直角 坐标 系 ， 所 所 到 的 年 阵 都 大 相应 的 线 
VETE OE Abs qr BJ A ERES, 
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i* # A E— 4 nxa WES ASIE MJ 
At= A, 
2° 075a = 0 n; Bp, mx» BUR EE LJ" XE nom 
greg E EE, 
3° WE D=43diag(dy,, ds, ©, da) Aux n Bro fa Be, HJ 
I D* = diag (di, di, 5 d;), 
其 中 记号 dé 表示 
a| 9. face 
dri 3 ds0, 


4° 四 站 站 o|. 
0 . 
5° 4 A-USV', AJ; m xn Br, UV 23g mx m 
MA nxn WEE PE, T Š 29 m x n Br E FE, RU | 
A*-—ySU*, 
6° d Ag m xn Er, rank( A) =n, Bj 
A* — (A* A) 14*, 
OX rank( A) =m, W 
Ti At= ACA AS), 
7^ 特例 , @ 为 % 维 列 向 量 , 且 er s: 0, 则 
a* —(a'a)^a', 
n a a*t —a*'—-a(a a)", 
8° 满 秩 分 解 ， 设 A= BO, 4 为 mxn 芥 , BXymxe 
K, O 为 了 xm Wr, B. : 
rank(A) —rank(B) —rank(O) =r, 
wW. A* -O*B*. 
作为 本 章 的 结束 语 | 我 们 补充 说 明和 于 下 . 
1) 在 前 面 的 讨论 中 > 在 建立 各 种 广义 逆 算 子 及 其 特征 性 
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t=], 2, ta 7», 


质 时 , 有 关 空 间 为 西 空间 , 重要 的 是 其 中 定义 了 内 积 ,并 不 小 
及 具体 的 坐标 系 。 换 名 话 说 , 向量 是 抽象 的 向 量 , 而 不 是 华 
标 向 总 , 算 子 是 抽象 的 算 子 , 它们 都 与 坐标 系 的 选择 无 关 ， 仅 
仅 在 建立 矩阵 表示 的 时 候 , 才 需 要 建立 坐标 系 ， 0s 

2) 在 本 章 中 所 考虑 的 线性 算 子 为 定义 在 西 空间 上 的 线 
性 算 子 ， 它 们 的 矩阵 表示 为 复 矩 隆 ， 如 果 把 西 空间 换 成 欧 氏 
空间 , 那么 相应 的 矩阵 就 是 实 抵 阵 了 ， 这 时 ， 从 的 伴随 算 子 
A" VER, AP, 而 相应 的 伴随 矩阵 

A' — AT, 

这 就 是 说 , n3 ute C) 换 成 转 置 O 就 得 到 在 欧 氏 空间 中 
的 相应 表达 式 ， | | | 


EBA 


.$1 SEE TESHI ERI AERE. 


1-1 Courant-Fischer 定理 
| 关于 广义 逆 矩 阵 以 及 和 它 相 联系 的 线性 最 小 二 乘 问题 ， 
有 一 大 类 来 自 于 对 统计 的 或 实验 观测 数据 处 理 的 和 需要， 问题 
中 的 数据 本 身 带 有 一 定 的 误差 ， 在 利用 电子 计算 机 进 答 计 算 
的 过 程 中 , 由 于 计算 机 的 字 长 为 有 限 , 不 可 避免 地 还 要 产生 含 
入 误差. 这 两 种 误差 对 计算 结果 都 会 产生 影响 ， 我 们 所 得 到 
的 计算 结果 ， 实 际 上 并 不 是 原始 问题 的 解 ， 而 是 原始 问题 的 
某 一 摄 动 问题 的 解 。 摄 动量 的 大 小 决定 于 原始 数据 的 精度 以 
及 所 使 用 计算 方法 的 数值 稳定 性 。 在 本 章 的 讨论 中 , RTA 
且 不 管 这 种 摄 动 的 来 源 ， 而 只 从 理论 上 来 研究 一 定 的 摄 动量 
对 解 所 产生 的 影响 , 并 指出 为 避免 或 减 小 摄 动 的 严重 危害 ,对 
摄 动 的 大 小 应 控制 到 何 种 程度 ， 这 就 是 我 们 研究 摄 动 理论 的 
任务 和 目的， 在 本 章 中 , 我 们 将 就 实 矩 阵 的 情形 进行 讨论 , 但 
是 , 所 得 到 的 结论 以 及 所 使 用 的 方法 , 对 于 复 矩 阵 的 情形 也 同 
样 适用 ， 在 当前 这 一 小 节 中 , 我 们 首先 向 读 省 介绍 反映 实 对 
称 和 矩阵 特征 值 极 性 的 Oourant-Eischer 定 理 ， 为 今后 的 讨论 
提供 所 需要 的 基础 ， 在 以 后 的 讨论 中 , 我 们 总 假定 在 所 涉及 
的 欧 氏 空间 中 , 已 经 建立 了 一 个 直角 坐标 系 , 也 就 是 说 , 已 经 
选 定 了 一 个 标准 直 交 系 作 为 空间 的 基底 . 

为 了 讨论 实 对 称 矩 阵 特征 值 的 极 性 ， 我 们 先 引 进 关 于 实 
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对 称 年 阵 的 谱 分 解 公 式 . 
设 4 是 一 个 mxn 阶 的 实 对 称 和 矩阵 ， 则 它 的 w 个 特征 信 


都 是 实数 ， 并 存在 一 个 完备 的 标准 直 交 特征 向 量 系 。 今 假定 
这 冯 个 实 特征 值 按 大 小 顺序 排列 为 : 
MSA PS . 
和 它们 站 应 的 标准 直 交 特征 向 量 系 为 ， 
$4, tlo, Ut, uU, 
Br, E 
T 1, i=j, e m 
Att; — AE, UTU = -| ¿=J, i, j- 1, 2. "e (2) 
定理 1 任何 nxn Urt SR RO PE A, 总 可 以 用 它 的 一 
个 标准 直 交 特征 向 量 系 {i} 分 解 成 单 秩 和 矩阵 之 和 ， 
A 一 At u + ttt +A H U. E «3) 
4 RR (SL m SERERE AR PELA 的 谱 分 解 公式 ， 
证 明 用 4 的 特征 向 量 u, 为 列 构造 矩阵 


TA U 是 一 个 直 交 阵 , 并 二 ' ` 
UT AU —-U7 Au, -- Att] 
UT Dt, n Anth] wt 
| | Ac diag (As, A, 9 M noo (4) 
从 而 便条 TTC 1.74 x 
A= AU? 2 MU + e Ada? WE. 


现在 我 们 来 考虑 下 列 极 值 问题 : 一 4 
问题 1 任意 给 定 了 个 iR pu p», PeR 
maxg'Am, . > m Ur ic 


min max e^ Ac, (6) 


ip) dzi- EN 
问题 2 在 问题 工 的 同样 条 件 下 ， 先 求 
min a7 Aæ 
zo 
PERS) R | 
max min z^ Am, 
(po Rig (T) 


=0 


这 就 是 本 节 所 要 考虑 的 二 次 型 的 min-max Ñ max-min. 
问题 
今 就 问题 工 讨 论 于 下 , 
因为 0740 一 4， 所 以 ,车 令 
w=Uy, W.y-U'z, 
于 是 便 有 
oq ÁE- y Ay =ni MA, 
Jr 7, m, sy m DER IRURE. OX 
p = Uq,,- 即 q, = —U7p, ¿=1, 2, ---, r. 
FERH |= | —1, z"p,—0 就 转化 为 
gy —aa 1, 
zTp,—9'U?p,—97q,—0, i—1,2, m 
WE y Hu PAPE m, n 满足 > 十 1 个 方程 ,其 中 有 


人 ?个 为 齐 次 方程 ， 
97q,—0, ¿=1, 2, 


再 补充 nx 一 1 个 条 件 
Nra = Nrg = i =N=], 
便 得 到 含 % 个 未 知 量 mi, …, M 的 wm 一 个 齐 次 方程 , 它 必 有 
非 零 解 , 设 其 为 
7, Na, ***, 7,543, O, =+, O, 


i= 82 -a 


为 使 其 满足 另 一 个 条 件 Ig]  L, 可 以 把 它 标 准 化 
> 他 一 二 
这 时 显然 有 atAx- ty o Sinai, 
从 而 可 知 , 对 前 述 任意 给 定 的 了 ERE Ds, = Pr 必 有 


p WT ARN - (8) 
HF ps, …, Pe 是 任意 的 , 这 就 表示 
min max ETAC uaa, 
(p) bo 
男 一 方面 , A 3C p. - Ue, xj q =e, i=l, 2, = 
而 条 件 uy —1, y"g;- 0 RAA 
g'e;-— 0, ¿=1, 2, M 7; 
Ep . T = 0, ¿= 1, 2, e., T; 
以 及 > u- 
i-rtl 
因此 ， a'Am —y ym D Milan, 
由 此 可 见 必 有 
T 
prs < Ag uas (9) 


比较 (8) 和 (9) 可 知 ,对 如 此 给 定 的 Bi, …, p, 必 有 有 


max wTAN=N,r1, 


实际 上 这 个 极 尖 值 当 

74371, —0, (x71, $—10, 2, m 
时 达到 ， 所 以 , 对 一 切 包含 ?个 向 量 pi, cup 的 集合 {2D}， 
我 们 有 关系 | 
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min max zT Ae —2, 4. (10) 
(po dg 


这 就 是 问题 1 的 解 。 STAR 2, EAR IPB rE 
讨论 ,其 结果 为 


max min zx^"Aae- Aar. (11) 
(pp Igi=i  - 
xTp,-0 


于 是 便 得 到 
定理 2 (Qourant-Fischer) 


min max €T Am Mia 03 00 K10Yy 
DM ET 


max min x" Ax ss, (11) 
(pò Miel C 
1 3o. . AUT 


Job AH r AFE Ds s Pr 
1-2 矩阵 的 奇异 值 分 解 定理 
实 对 称 方 阵 可 以 用 直 交 相似 变换 化 为 对 角形 ， 其 中 对 角 . 
阵 的 主 对 角 元 为 矩阵 的 特征 值 ， 对 于 一 般 的 长 方 阵 (也 包括 
不 对 称 的 方 阵 ) 有 非常 相似 的 结论 . 今 设 4 是 一 个 mx 阶 
KER, 我 们 首先 把 它 扩 张 成 一 个 (mde) x (mtn) 阶 的 实 


对 称 方 阵 E" 
0 A 
o=] AT al (12) 
出 于 0 为 实 对 称 和 矩阵 , 所 以 存在 有 完备 的 标准 直 交 特征 向 量 ， 
A. Wk p€ is 是 矩阵 0 的 与 特征 值 % 相 应 的 特征 向 量 
Cw — Aw, (13) 
min 维 向 量 w np DAJH — Am Z8] Et £ fo —^- n egi v 3 
示 成 


于 是 (18) 就 可 以 表示 成 


A= 4 
2 i4 
A — Av, G5 
HAMA PARAMA EA EESH 
. ` T =) ATU 一 和 2 
ATAv =A A Uu — Xv, (15) 


AATu=AXAp= Mt. 
-XXH e #H u 2) 50 Rug SE EE pe ATA fi AAT BS 38 1E [nj 
CEE, CARRE OU 20. RA CO) 和 —A TIED IARE 
EE C 的 特征 值 , 和 它们 相应 的 特征 向 量 分 别 为 
[ul -u ] 
C3 四 和 | v | . _ 
WME rank (A) — En, H] rank (O) =2, 所 以 矩 降 O 1 28 
个 异 于 零 的 特征 值 , 每 一 个 特征 值 都 成 对 出 现 把 它们 记 为 
Ay Àa t. As 和 — ay Aa e Ar 

不 失 一 般 性 , 可 假定 12-0, i=l, 2, o, B. 

ELL 我 们 称 加,，…, hz WEE A 的 奇异 值 . 

据 (15) 可 知 ,4 和 A” 有 共同 的 奇异 值 ， ”| 

如 果 4 为 列 满 秩 , 即 rank(4)=m, 则 4 有 ww 个 奇异 值 ,有 
时 为 了 方便 ， 在 rank(4) =F p, 我 们 也 称 4 有 nn 一 6 个 零 
AF. 

SUE 324 13£— 2 [BOE 3E SE E AB PA AA m 447 的 特征 值 
At, M, ,入 相对 应 的 特征 向 量 分 别 为 | 

Vi, Us, +, Ui T H, Ua, +, Uy, 
从 而 有 
AT A[vs, +, vx] = [MO e AO], l 

AAT [us, e, Uyl = DU e, AS]. G6) 
I3 | 
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A[vi, 1, o] = [At e, Aty] = [Aa 6, `, AU, 
于 是 便 得 到 了 分 解 公式 
. AV -UA, (17) 

其 中 

U= [ti, 2] V = [0 t Vr], 

A= diag(Qu, =, MO, 

U, V 和 A 分 别 为 mxz fru x E rg bx E gr. 不 撩 一 般 性 ， 
我 们 可 假定 (2 和 {如 都 是 标准 直 交 系 ,于 基 公 式 (17) 就 可 以 
SE ZR 


或 


(8) 


UTAV =A, 


A=UAV", (19) 
定义 2 我 们 称 (19) 为 矩阵 4 的 奇异 值 分 解 公 式 。 

在 这 个 分 解 式 中 ，Z 和 六 的 列 向 量 分 别 为 矩阵 AAT 和 
ATA 的 特征 向 量 , 而 对 角 阵 4 中 的 主 对 角 元 素 就 是 矩阵 4 的 
奇异 值 ， 适 当 交 换 和 矩阵 4 各 列 的 次 序 , 可 以 使 4 中 的 奇异 什 
Ms o, e, À 为 不 增 序列 

1-3 MERE 4 和 广义 着 矩 阵 A 的 谱 范 数 

设 mxwn 阶 矩阵 4 RERA k, WAR k AGERE 

Mamme ca, 
JUGE SUB a EREE E K H: SC Wa yE BE: BU 38 3 XR B 

4” 矩阵 4 的 范 数 ”根据 矩阵 范 数 的 定义 ， 

Al =max | Aæ, z€ d, 
根据 向 量 欧 氏 范 数 的 表达 式 
| Am [2 277 A? Aoc, 
矩阵 ATA 为 正 半 定 , 它 的 上 个 正 特征 值 依 序 为 “~ 
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所 以 
max | 4æ]?= max (wrArAw) — max (a Sigo? Ja 
= max SINT), 
不 难 证 明 > (mp? «d, 
从 而 可 知 max [Aæ <h, 


IzI=1 
然而 , ES e =u, WERE 
æT AT Àm— M, 
从 而 可 知 max LAa | - M 
. lzi= 


所 以 我 们 便 证 明了 
f [Ajr (20) 
这 就 是 说 ,矩阵 4 的 范 数 | ATE TIERE ERR EE AA 的 最 大 特 
征 值 的 正平 方 根 ， A | TABERABIECKA SRI. B, 如 
3E 4-0,WjiA]-0. ITERA ES at, 也 可 以 说 它 
的 最 大 奇异 值 为 零 , | 

2° fX WE At 的 范 数 ”根据 矩阵 A — 
公式 , 若 rank( A) =£, WJ A—U AV", U X mx k Wr, Ak x 
kV nx 阶 ,并 有 旦 对 角 阵 4 非 奇 异 . 所 以 


At =p AUT, (21) 
我 们 仍 假定 4 主 对 角 元 处 的 奇异 值 仍 按 不 增 顺 序 排列 ， 并 且 
A= ë -. | (22) 

E 。 


根据 范 数 的 定义 
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1A* = max | A's? 
=max ((V AU?2z)"(V A3UTa)Y 
fadi 


一 max u” 4", 
lzt-1 
其 中 ,= Ua, HY exl, 所 以 g^ gy — x" x —1, 
于 是 Jat j? = max SA Y= 
ITE 


ib 


这 就 得 下 .. 
[A+] X", (23) 
BDP XWR A" 前 范 数 等 于 矩阵 4 js | COE) SER CES 
数 ,也 就 是 矩阵 AT 的 最 大 奇异 值 ， 
因为 矩阵 4 和 At 的 范 数 都 可 以 用 4 的 奇异 值 来 表 S 
所 以 又 称 这 种 矩阵 范 数 为 矩阵 的 谱 范 数 . 6 AA [0* | — [0] = 
14 奇异 值 摄 动 定理 
4t mx v MEE 4 有 微小 摄 动 4, 记 号 = 4-54, B. 
rank(B) —rank(A) =k, 
USES A R5 8 3 
AM Aa Ny, 
MARE B 由 于 与 4 同 秩 , BA 个 正 奇 异 值 ， 
01270322 ** Z0. B 
BUE SEPR ATA. 的 与 特征 值 13, M, …, PARU DUE 
TiO t, Vs, o, Ou. J Courant-Fischer 定理 中 的 
fi—-U,4-1,2, --, v, rx b--1, 
R RGE 


ola Smax æTBT BE =max æT(A-+5A)T(A+8A)æ 
iz D 1 #z|=1 
=0 pct 


«max (747 Ag)? (æ (847 (BA LY 


iri=1 
ztp-0 


«[ max (m'A' Aa) š + max (a* (8.A)" (8.4) ac) ia 


IL d 


«Las BAD, r=1, 2, =, El, 
所 以 有 
Braga [94], (24) 
BE Trt [34]. 


于 是 我 们 就 得 到 关于 奇异 值 的 摄 动 定理 , 
定理 3 ik 4，54，B8 一 4+64 Mg mxn EE, H 
rank(B) 一 rank(4), 把 4 和 BB 的 个 奇异 什 按 大 小 顺序 
分 别 排列 为 


则 以 下 的 结论 成 立 ; 
c <+ [8.4 p i=1, 2, t5, h. (25) 


§2 Banach 引 理 和 非 奇异 方 阵 的 摄 动 定理 


21 引言 

KARERA dz t x WO Hi BE At 的 摄 动 理论 ,并 
PEURA SC m E PEU EAE, — 为 此 ,我 们 先 从 非 奇异 
HERF. ü 

9-89 Banach 引 理 

设 4 是 一 个 nwxn 阶 韭 奇异 方 阵 , E CBE AT fede, 2 
微小 报 动 后 ,，4-+64 ES 6 保持 它 的 非 奇 异性 ? 显然 , 如 . 
果 % 是 4 的 一 个 特征 值 ， 若 取 34= —AT, 则 4 二 54 就 变 成 
FEDT. MR, SURHERGRCD 4 的 所 有 特征 值 ， 元 论 风 如 
PPK, 矩阵 4 一 AI 总 是 非 奇 异 的 ， 但 是 ， 我 们 感 兴 过 的 大 微 
小 摄 动 84 对 矩阵 的 影响 ,也 就 是 说 ,是否 当 上 64] 足够 小 时 ， 
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恒 能 保持 矩阵 的 非 奇 异性 ? 车 然 ， 我 们 进一步 就 可 以 研究 极 
限 问 题 ， 
lim (A+54) 3 —$, 


Edi=0 
我 们 将 证 归 一 定 存在 正 数 7, 当 84|<w Bj, E AHATEA 
非 奇 异 ,并且 , 对 任何 非 奇异 方 阵 4, 极 限 关 系 
Jm, 430 a 


恒 成 立 ， 这 就 是 说 , 非 奇 异 方 阵 4 AAE ACC 是 连续 的， 
为 此 , 我 们 先 证 明 一 个 重要 引 理 ， 
引 理 (Banach) 设 工 为 mxom 阶 单位 阵 ， 加 是 一 个 同 阶 
JE. 车 . 
[F|<1, (26) 
WER I-E 非 奇异 , 并 且 
[T-P HKA- F|). (27) 
证 明 设 z 为 任 一 % 维 非 零 向 量 , 总 有 
iG -Fel-]|z-Fxr|2!1x|-]1F2z|2]12z]—]7£|! [2] 
-(ü-|FDizl-0. 
因此 , 齐 次 方程 (1 一 也 )w — 0 无 非 零 解 ， 从 而 可 知 矩 阵 I-P 
必 为 非 奇 异 , 即 在 条 件 (26) 满足 时 , WAR (T — P) EE. 
现在 我 们 再 来 证 明 不 等 式 (27)。 由 于 (7 一)-! FE, Bi 
ELO —F) QC - F)? = 了 ,这 个 恒等式 可 以 天 示 成 
(I-.F)(I-—F)3-(I-F) a34-F(I-—F)*, 
从 而 有 
(I—F)*-I-F(I—F), 


对 两 端 取 范 数 便 得 到 不 等 式 

[T-P <IRE- 
B iG -F)|a-iFD«t, 
从 而 使 证 明了 不 等 式 
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IG-Fy*ea-pFDO. ue. 
这 里 指出 , 车 以 一 了 了 代 石 , 划 引 理 仍 成 立 ， 这 就 是 说 , 3Y 
LE LA, 9) I—F EAIA 2f-H. 
[Ga Fiso- um». 
HB OU FICi RIKA X 
-a-re Eh. (Q8) 
证 明 AARNE- E 并且 
1-U-Fy)*e- FU P, 
VERG E GU] 
U-(QI-P)Ne FO PS PIP) 
从 而 便 证 明了 不 等 式 (28). 证 毕 . 
ABE T i= T 不 等 式 (28) RER 了 摄 动 后 的 道 矩 阵 
QI-F)35Hyr I7 8QER EE, ! F p^], 两 者 愈 为 接近 ， 
2-3 一 般 道 矩阵 的 摄 动 定理 
上 一 小 节 中 的 结果 是 我 们 所 要 讨论 的 一 般 非 奇异 方 阵 的 
特例 ， 但 是 ,有 了 这 个 基础 ,解决 一 般 情形 就 没有 困难 了 ， 因 
28, 车 %X%n 阶 方 阵 4 为 非 奇 异 , 则 总 可 以 把 摄 动 怎 阵 4 十 84 
写成 


A+64A=A(I+4-184), 
4 十 34 为 非 奇 晃 的 充分 必要 条 件 是 (7 十 4 1454) 为 非 奇 异 ， 
并 且 当 (7 二 484) 为 非 奇 异 时 ， 
(A--8.4) 1 — (T+ A384) 1471, 
了 于是， 一般 情形 的 问题 就 转化 为 前 面 的 特例 ， 即 现在 的 问题 
便 是 考虑 保持 矩阵 了 +4-164 的 非 奇 异性 问题 了 , 令 了 = 
— 4-154， 这 个 问题 就 是 Banach 引 理 及 其 推论 中 所 曾经 讨 
论 过 的 ， 对 于 这 种 一 般 问 题 的 结论 , 可 以 叙述 如 下 ， 
定理 设 4 和 584 EBE A 为 非 奇 异 , 若 摄 动 
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B: 34 满足 不 等 式 


A784] «1, (29) 
WEARS: 
1° A484 为 韭 奇异 ; 
2” 佑 计 式 
1 .4 一 (A+A) — IF| 90 
A c Ci-HBT (30) 


成 立 , 其 中 F-47384, 
指 这 个 定理 我 们 便 可 以 证 明 
THI 非 奇 异 方 阵 ARMER 4 于 是 连续 的 ， 即 我 们 
Jig, Goya 


证 明 根据 不 等 式 (30), 当 [54|->0 时 ， 
IPFI - 147840 [47118410, 


所 以 有 lim |42-(A+84)1|=0, 
I 

BB lim (A4-84) *—A 1, 
i?A120 

Ww. 


83 满 秩 矩阵 广义 逆 的 连续 性 问题 


3-1 广义 送 矩 阵 不 连续 的 例 | 

前 节 中 我 们 讨论 了 非 奇 异 方 阵 逆 矩 阵 的 连续 性 问题 ， 结 
ibi AC 具有 所 述 的 连续 性 ， 现 在 我 们 要 问 ， 保 证 这 种 连续 
性 的 根本 原因 何在 ? 从 表面 上 我 们 可 以 看 到 以 下 现象 ， 非 奇 
异 方 阵 为 满 牧 , 当 报 动量 84 足够 小 时 ， 不 会 改变 这 个 事实 ， 
如 果 4 不 满 秩 ,不 难 证 明 总 可 以 选取 64, 一 方面 可 使 之 任意 
小 ,而 同时 使 AHOA RENIER, BI (4 十 34)-+ 窑 在 ， 另 一 方 
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I, GONE UIEELORGE 4 二 54 NAS, Ai EUER 
限 问题 ,lim (4 二 34) 了， 实际 上 ， 不 论 如 何 推广 逆 甜 阵 的 


概念 , 有 关连 续 性 问题 的 答 崇 者 是 否定 的 ， 今 以 广义 逆 扼 
A 为 例 作为 说 明 ， 因为 4? 的 存在 不 受 rank(4) 大 小 的 
制 ,极限 问题 l 

lim (A+8A)t 


làAI1-0 
总 是 可 以 考虑 的 。 设 
1d 0 
0 0 
lo 0 
则 rank(4) —1, CESR, AA, 


[i 0 0 
AT= | 


A= 


z 


lo 0 0 
ro 0j 
如 果 令 84-| 0 < |, s=0, 
8: | lo ol 
10 
hij 4AT8A4—|O ej, 
| 0 0 


而 矩阵 A+ 84 为 列 满 秩 ， 即 rank(4 十 84)=3>Tank(4)， 
可 以 算出 
[i 0 0 
(4 十 384) -| ， m jl 
从 而 可 知 当 s—0 时 (这 时 184|->0) ,极限 
lim (44-84)* 
根本 就 不 存在 ， 但 是 ,如果 我 们 令 


— 93 ~ 


1e 
8A=| 0 0l, s=0, 
0 O0 


Hj rank(.A4- 8.4) 一 ?rank(4) 一 4, 容易 算出 


1 1 0 O 
4-8A4)* = - . 
(4 ire | e 0 0 | 


在 这 种 情形 , 当 s->0 时 却 有 
lim (arsa) |) 9 o 
m 10 0 0 
但 总 的 说 来 ， 例 中 的 矩阵 A "RUD YO BEBE At 是 不 连续 
BJ. 
9-2 满 秩 矩 阵 广义 道 的 连续 性 
上 一 小 节 中 的 便 虽 然 是 一 个 特例 , 它 却 反映 了 情况 , 第 一 
种 情形 , rank CA 1-814) rank CA) , 3X BER BC FE, 而 第 二 
TREE, rankCA--0.4) =rank(4), 这 时 极限 存在 而 且 就 是 
47, 这 两 种 情形 的 对 比 是 很 有 意义 的 , 它 说 明 极 限 存 在 与 否 ， 
似乎 与 矩阵 秩 是 否 发 生变 化 有 关 ， 对 于 满 秩 矩阵 来 说 , 只 要 
摄 动量 足够 小 , 妹 阵 总 昼 保 持 为 满 秩 , 方 阵 的 情形 就 说 明了 这 
个 事实 ， 实 际 上 , 和 满 秩 方 阵 的 情形 一 样 , WK mxn pag 
HEA, CHJODE At 的 确 也 是 连续 的 ， 我 们 有 
定理 6 设 4 TOME mxn APR, 则 恒 有 
Jim im (4+64)+= (81) 


证 明 不 失 一 般 性 可 设 4 为 列 满 秩 , 即 rank(4) =n, 所 
M, AA nxn 阶 非 奇异 矩阵 (实际 上 为 对 称 正定 )， 这 时 
A* 可 以 表示 成 
A* — (A7A)-1AT,. 
w 34 为 同 阶 摄 动 抢 阵 , 我 们 有 关系 
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CA--8.4)* (A--8.4) — AT A4- (À 4-84)*8A4- (8A4)7 A, 

根据 Banach 引 理 的 推论 可 知 , 如 果 

(Cd4r4)-T(C4TS4)784) 二 (34)74]j 1, 
WECHAT CA -- 040 2g dE SE EZ; £, 28 —23 168, RIA 
BI ELELIAT R tk |, 以 保证 二 述 不 等 式 成 立 ， 因 为 4 是 给 定 
的 ,存在 有 正 数 ,只 要 154|<n， 上 述 不 等 式 总 成 立 ， 这 时 ， 
广义 逆 和 矩阵 (4 十 54) 可 以 表示 成 

CA4-8.4) *— [(ATSA)TCATSEA) -ALEA)’, 
令 i154]->0, 这 时 ,一 方面 有 
Jim. [G4--94)* A+8A) 044) 


同时 还 有 lim (44-0.4)7 — AT, 
A= 
从 而 便 证 名 
lim (A--84)* — CAT A) 1T — A45, 
Jó A j—0 


这 就 是 本 定理 的 绪论 ， 证 毕 . 


$4 气 秩 怎 阵 广义 逆 的 连续 性 问题 


41 摄 动 不 改 变 矩 阵 秩 的 情形 
在 前 一 节 的 例 中 己 表 现 出 扰动 对 和 矩阵 秩 的 影响 和 极限 
lim (A+84)* 


存在 与 否 有 一 定 的 联系 ， 在 这 一 节 中 , 我 们 将 严格 证 明 前 面 
的 预测 是 完全 正确 的 .在 这 一 小 节 中 我 们 将 先 考虑 摄 动 A 
不 改变 4 十 ;4 的 秩 的 情形 , BI 5A 恒 保 持 

rank( 4 十 84) 一 zank(4) =b 
HRE. 不 失 一 般 性 , 可 假定 mcm, 这 时 
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b, 
e HL CL 54)* DE EY. 
smi u 


ronk(4£4-8.4) rank(A) — «n, 


H. ， 
| .454 «10 


RATH HS 


| dA 
| (A F 5.4)* P 一- IJA A*T[82 EET P 
WEBB 因为 4 和 nm 以 它们 有 同样 多 的 正 奇 
异 们 ,分 别 记 之 为 
No "> Ny 和 Ciga t 27 Gk, 


根据 $1 中 的 奇异 信 报 动 定理 可 知 
Tp À 57 8.41 li . 
另外 ,我 们 已 知 


一直， Karai, 
这 就 是 说 ， 
NEN Op = i — 
up PAra" 
从 而 便 得 到 不 等 式 I 
ipu. 


[CAT840*07 {A 
BI (47 [18A] <i, 于 是 就 得 到 估计 式 
A A +J < 1A* | 3 
CA 84) | JASAT: mla, 
引 理 8 记 B 一 4+54, 我 们 有 以 下 的 一 般 关 系 式 ， 


在 这 个 条 件 下 ， 可 以 证 明 短 有 
rank (4484) zzxank (4) 。 
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B* — A*— — B* (BA) A* --B*B!' (84) (24 — AA+) 
4 (Ia B+B) (84)* A? AY, (88) 
证 明 首先 我 们 把 B81 一 4? RRR: 
B*— A+~— B*(B- A)At+ (B+— A*) 
+B+(B- A) A*. 
把 这 个 恒等式 的 右 端 依 次 重新 组 合 各 项 如 下 ， 
—B* (84) A* 4- B* BrAA++ B*BA* — A* 
= — B+ (854) At- B* (I4 — A4*) — (I, — B* B) At 
—B*— A*, (84) 
其 中 , Im 和 工 ,分 别 表示 m x m Bill n x n 阶 单位 矩阵 ， 
TIERS 235-3 中 关于 At 的 性 质 6°， 
AT(L,— AA+) A! — ATAA* = AT — AT =0, 
由 此 可 推 得 
B+(Tn 一 44t)= BrDBBr(To 一 44) | 
I -B*(BB*y(I,—A4*) 
= B* Bi B'(,— AA7*) 
— B* B'U( A7 -84T) (I, AA+) 
—B*BU(34)(I,—44*), (8b) 
用 同样 的 方法 可 以 证 明 
—(Z,—B*B)A*-(1,—B*B)(84)7A*" A*. — (86) 
jE (85, (86) X (64) 中 ， 就 得 到 了 所 需要 的 恒 等 关 系 
〈83)， 证 毕 . 
特例 ” 当 和 矩阵 满 秩 时 , 引 理 中 的 恒等式 还 可 简化 ， 例 如 ， 
落 rank( Á) =m, W AAt 一 To 于 是 (33) 就 简化 为 
B*— A*= — B* (84) A*-(I,— B*B)(84)7A*7A*,. (c) 
其 中 , 若 A. BEBE nx nr E SUI EE, DU Ce) EIE EX 
B=- A= — B71(84)4, (d) 
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A TER ER, 我 们 便 可 以 证 明 
定理 ? 对 一 般 的 m%x% 阶 矩阵 4 和 B, 总 有 信 计 式 . 
HB*- A* | GAB [o LB" P8 4C 02008 - AJ. (37) 
证 明 Wr ALBIS SEK. MJ AA* SI. B BAIn 这 时 ， 
In- AAt 和 I 一 B+B SAEI BE, U 18 T8 CAD 
是 1。 对 恒等式 (33) 两 端 取 范 数 就 得 到 (37)， 证 毕 
如 果 AA*—I.xX B78B 一 T, 则 (37) 亦 然 成 立 , 而 且 结 果 
要 更 好 一 些 ， 例 如 , 若 44+ 一 了 Tm, 则 (83) 变 成 
B* — A* = — B* (84) A* 
+(I,- B*B) (84) A1 A*, (38-1) 


iB*—A*|«[2*]LA* 1 i5AT] -- [64] -LA4* TP 
=(| BH A+] +A B-A]. 
d B'B= In 则 有 有 | 
[B-A |< (BHA + B+ B-A — (98-2) 
SUE SLIDER EUR ER AB BE SC 3: BJ E SE FE Jr, 
首先 , 从 信 计 式 (82) 可 知 ,车 |A*||8A|<1, E 
rank(A+64)=~rank(A), 
W At AR, Ha, [84190 时 ,全 有 
Um [CA24-854)* — A*[ —0, 
Bl lim (4--84)*- A*. 


ieA 10 
应 当 指 出 ， 在 取 极 限 1341->0 时 ，54 UE SOBRE 
A+A 的 秩 和 A 的 秩 相 等 , 
上 述 结 论 可 以 崇 示 成 下 述 定理 的 形式 ， 
EEB 设 {4 是 一 个 m xw BABERE TU, ETRAS BE 
A, B] 
lim A= A, (89) 
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ét 
lim A= At, (40) 
它 的 一 个 充分 条 件 是 ; NRAKA i, 例如 当 >N ( 某 一 个 给 
定 的 自然 数 ) 时 , EA 
rank(A,) =rank( A), (41) 
42 摄 动 使 亏 秩 和 矩阵 的 秩 增 大 的 情形 
TER m x x 阶 和 矩阵 4 为 亏 秩 ，rank(4)= 二 hb， 当 摄 动 64 
充分 小 时 , 4 十 84 的 秩 不 会 减 小 ， 这 是 因为 ， 若 记 A= [ax， 
a,], BRER k IARE, 令 54= [ða …, ða], 
则 当 max{|òa]} 充分 小 时 ， 容 易 证 明 向 量 系 dtdd, …， 
a; +-óa, 便 保 持 线 性 独立 ， 这 就 证 明 ， 当 [OA] 充分 小 时 ， 
rank(A--8.)z, 因此 ， 对 气 秩 乍 阵 我 们 只 考虑 摄 动 使 托 
阵 的 秩 增 大 时 会 产生 什么 样 的 影响 。 为 此 目的 ,我 们 假定 
rank(A--5.4) —rank(A)- £k, (42) 
在 这 种 情况 下 我 们 有 以 下 的 估计 式 。 
定理 9 SPE 4 RRS AR Ke 4+54 满足 条 件 
(42), M BAHA: 
[CA--940* |>- 


TT (9) 

证 明 设 rank(4+54)=7>k， 则 矩阵 4 的 第 7 个 奇 
异 值 和 .一 0。 这 时 ,根据 奇异 值 摄 动 定理 , 4 十 64 BST 
异 值 ( 即 最 小 的 正 奇异 值 )o;y 满 足 不 等 式 


o,<|a4l. (44) 
因为 | MEZ 
所 以 有 | (42-84) * | e TAT 


即 (43)， 证 毕 ， 
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这 个 定理 说 明 ， 如 果 摄 动 54 使 矩阵 A+A 的 秩 增 大 ， 
1841 IS, LCA -84) IRAK, 3 184|—0 n, | C4 4-840 
一 ce， 


推论 ” 设 {4 是 一 个 只 xm MIEREA], B. 


EDAM RAKE i, TUR 
Ñ rank(4, ) - rank (A), 
ES ens BJ E,SAEIELERED Y 
EuRi8(Stewart) y DERKI mxn Win, Gk 
lim (A44-84)* — A*, 


RAlo 
REDDERE: 对 充分 小 的 134 让 恒 有 
rank(A--0A) —rank( A), 

Wt iei 4] EL 8 UR, 对 于 充分 小 的 54, rank (A+ 54) 
不 可 能 小 于 rank(4), 现在 我 们 来 进 一 一 步 证 明 ， 对 任意 给 定 
的 正 数 9, 不论 它 如 何 小 , 如 果 和 矩阵 4 为 气 秩 , 则 总 存在 摄 动 
54, 它 一 方面 满足 不 等 式 

i84] «n, 
WARAK Y ARE 4 十 84 的 秩 , 即 
rank( A 4-84) 7 rank( A), 

今 证 明 于 下 . 

ii A= [a +, G,], J rank( A) = bcn EMRE 
mzen), PRE, np BE a, e, Gy 为 线性 独立 , 并 是 ei 不 
属于 Span{gqi,…', e. 4 
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ZEB Af = ei, xS spa b, af 
rank( A -- 0.4) =k- 17» rank( A4), 
于 是 我 们 便 汪 明了 一 个 重要 结论 


a 除 


5-1 亏 获 矩阵 的 保 秩 变形 

从 上 面 的 讨论 可 以 看 出 气 秩 年 阵 广义 道 和 矩阵 的 不 :连续 
性 ,其 根源 在 于 微小 摄 动 就 可 以 增 大 秆 阵 的 秩 ， 我 们 还 着 到 
这 种 牧 的 增 大 似乎 又 是 不 可 各 免 的 ， 如 此 说 来 , 在 电子 计算 
机 上 计算 却 秩 和 矩阵 的 广义 逆 第 阵 是 不 可 能 的 了 . fa 148 H, 
这 种 纯 理 论 的 结论 , 实际 上 是 似是而非 的 ， 换 名 话说 , S TRAE 
阵 广 义 逆 的 这 种 不 连续 性 , 仅仅 是 一 种 迷糊 人 的 胡 面 现象 ,并 
非 实质 性 的 ， 经 过 计算 数学 上 的 适当 处 理 , MTESA 
产生 前 不 连续 性 ， 完 全 可 以 消除 ， 为 了 消除 这 种 诉 谓 的 不 连 
续 性 ,我 们 将 提出 一 种 亏 秩 怎 阵 的 保 秩 变 形 的 思想 , 以 及 实现 
这 种 保 秩 变形 的 可 行 的 方法 . 

亏 秩 矩 阵 的 保 秩 变 形 ” 今 假定 4 为 给 定 的 一 个 mxn 阶 
亏 秩 矩阵 , rankCA) =b, HR SA 为 给 定 的 任 仿 前 微小 报 
动量 ， 现 在 我 们 根据 AA 来 移 造 一 个 同 阶 的 矩阵 A, E 
之 上 共有 下 列 性 质 . 

G) 4 是 对 A+A 加 以 运 当 人 处 理 而 得 到 的 ， 不 是 独立 
T AA 之 外 而 随意 腾 造 的 . 

Qi) 当 [8.4[0 时 , AA, 

Qn) 当 164| 充分 小 时 , 828 rank (45) -rank( A4), 
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定义 8 具有 上 列 三 部 性 质 的 矩阵 4; 为 由 矩阵 4 和 摄 
Z) 04. 所 确定 的 (不 是 叭 一 的 ) 矩阵 4 二 54 的 一 种 保 秩 变 形 ， 
说 得 更 确切 一 些 , 我 们 可 以 称 4 为 A+A 的 一 种 有 效 的 保 
TA RET, 

TER UR SCELAR ERRE LR IK M, E LEONE 
这 个 定义 作 一 些 补充 说 明 ， 关 于 定义 中 的 (), 我 们 特别 强调 
ds 是 经 过 对 4 十 64 适当 加 以 处 理 而 得 到 的 ， 不 是 独立 于 
A--0A 之 外 而 随意 腾 造 的 ， 比 如 说 , 当 54 给 定 以 后 ,我 们 可 
以 简单 地 规定 4 一 4 十 15414, 它 显然 满足 定义 中 的 性 质 ( 刘 
i Cui) 然而 , 这 样 枸 造 的 保 和 铁 变 形 答 阵 对 于 广义 道 和 矩阵 的 计 
算 来 说 , BAEN, 因而 是 一 种 无 将 的 保 秩 变形 。 我 们 之 所 以 
要 建立 保 秩 变形 矩阵 这 个 概念 ,是 有 明确 的 目的 , 即 为 实际 计 
算 亏 秩 答 阵 的 广义 逆 及 与 其 相关 联 的 线性 最 小 二 乘 问题 等 实 
际 计算 问题 服务 的 在 定义 的 最 后 , 我 们 所 以 特别 加 上 “有 效 
的 “这 三 个 字 , 并 非 多 余 的 ， 正 是 为 了 强调 这 里 所 指出 的 昌 的 
性 ， 但 是 , 为 了 行文 简练 , 我 们 就 用 “ 保 秩 变形 ”这 个 词 , 而 略 
去 “有 效 的 ”三 字 , 它 所 包含 的 意义 不 变 ! 

52 保 秩 变 形 的 实现 方法 

考虑 到 今后 的 实际 需 葛 , 从 计算 数学 的 观点 出 发 ,在 这 一 
小 节 中 我 们 将 给 出 构造 保 秩 变形 矩阵 的 具体 方法 . 

梅 造 保 秩 变 形 矩 阵 的 直 交 化 方法 “我 们 先 把 络 定 的 亏 秩 
矩阵 Cz x% 阶 )4 HEB n Sm HEAD EE 32 ZI B 

A -—[&,, G5, +, dal, 

RUBE: 

1? rank( A) —£, 

2” 不 失 一 般 性 ,我 们 假定 mz, 并且 前 五 列 

Gi, °, Uz ⁄ 
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为 线性 独立 ， 

用 Gram-Schmidt 直 交 化 方法 把 向 量 序列 ca， oos, G, 化 
NA REID Ge, qm. Kop IgE g; 都 是 前 
了 个 向 量 «e, a, 的 线性 组 合 , 并 和 前 9— 1 AAEH 

Gd. =0, i=1, 2 2, tt wi 1. 
构造 mox 5 pris Ee e Qs, 


Q, = [q1, ^, qx], (45) 
W QI Hi Qr ARER 4 便 得 到 
TA=[R:U], (48) 


PN R JE—^ bx eld x k= iB, W U 是 一 个 一 
NOE bx (n-AMEE SEU 


rank (Q7 4) ^rank([R:U]) —£, (4T) 

在 另 一 方面 , 不 难 证 明 ， 
4=QxLRIV], (48) 
A+64= [Ga. + ŠG,, = Æa tian], (49) 


Di Bj, 把 a+ àƏa,, +, dyta; 用 Gram-Schmidt 方法 化 为 
一 个 标准 直 交 系 Ñi, C5 d, 然后 令 


Q = g, 5 à), (50) 
MR ER A+A 得 
QT LA +84] — [R:O], (B1) 


Kup, R R—4 bx b 阶 上 三 角 阵 , Ü J px @m— h) W BE. 
显然 , 当 |ó A ]|—0 br, 19,150, ¿=1, 2, ++, n, 从 而 
dig, ¿=1, 2, +, F. 
这 同时 也 表示 Q Qu. X. 
(R:U] — LR:U] =Q] CA -84) — QE A, 
所 以 ， 当 5.40, d ROLU], MMA, 3 
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[DA RENI RARE. Q 
A= Q.LESU], (52) 
iss [3A] 充分 小 时 ,条 省 
rank( A) = rank(41) —- 5, (53) 
JP, 3 [8410 Fg 
lim A.= A. (84) 
DAI 


An — x rti 4E "m Prp eray Py Lx 
SU HHESEEY SEGUE GD GI AS 
ij i Siowart R, 


lim Af-—A* 
A= 


AR C4 [O44] Up ET, Ar 825 At BiJ— 36 e E 


BMA RI HL] A 是 短 血 4 二 84 的 一 种 有 效 的 
保 秩 变形 ， 四 为 As 2831183 EARS WOWABERA-ROAXEPÓR 
CUBES. DEAETE X YO kak 
RIRKA ER TES C SRIRISLO T ECT. 

ERE SUA RATE HIT —MUABCEUR ZEE E VE BJ 27 
法 , BERAR, 细心 的 读 省 会 出 此 得 到 启发 , 收 到 举 一 反 
三 的 效果 . 此 各 说 直 交 化 方法 从 基 种 总 义 上 讲 , 不 过 是 实现 
XB VE TS BEER anh ER ZL—, res ane S MU Ji 
JM 1 dp b) HRE S TOR FEIER TAZE 
， 最 后 ,我 们 再 指出 一 点 , 目前 用 来 计 — 
性 最 小 二 乘 问题 的 一 切 BOTH, BLAU 7 法 外 ,都 隐 含 着 
保 秩 变形 的 思想 , 从 而 消除 了 摄 动 增 秩 所 带 米 的 严重 危害 , 在 
BB ULT, apti eet tro 当然 , 不 同 的 算法 所 
取得 的 实际 效果 也 会 有 很 大 差别 , 但 这 种 情况 的 发 生 , 是 由 于 
各 种 算法 李 身 的 数值 稳定 性 程度 有 所 差异 而 引起 的 ， 这 是 另 
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$6 Eo SW BE EE RE XR 


TEXRXtNE—— WW. RAITER ARRA RE 
8E E itt. 
今 假 定 

Aa =b (55) 


PE PAE x sar EH, 系 BU 为 m xm Br, b Ami 
DOE, wey n fÈ REE, +A RR A a tv 
二 乘 解 用 4 WJ S xe ABER AC 可 MEN 
a = Ab. (56) 
BSOR3ys ELI CES ER b aA OA 和 6b， 相应 摄 
asm 


(A--8.4) (x 4-027) =b+ 5b (57) 
的 极 小 最 小 二 乘 解 为 
m--óz=(A+8A)1(b-+àə0). . (58) 


假定 摄 动 ;4 不 改变 矩阵 的 秩 , 并 且 |ë A| 适当 地 小 ， 我 们 来 
对 由 于 摄 动 对 解 所 产生 的 影响 Ox 进行 依 计 ， 对 此 有 
303812. (EE TF PARE, 
1? rank(A--84) —rank(A), 
2° |A* [84] .—1, | 
则 有 估计 式 : 
làz | « icr (21a læ]+ lòbi n (59) 
其 中 ， 
4- |A* 18A], r=b- Az, (60) 
证 明 ”从 公式 458) 的 两 端 分 别 减 去 (56) 的 左 、 右 端 , 便 得 


=: 405 == 


m= (CA--84)* — Atb- (A-8545 * 8b, 
Jis 4-2 yg m 2 中 的 公式 (33), 上 式 可 以 表示 成 ， 
Sæ == --D'(84)m- B*'B'*(84)7 
| + (TBI (84) A7 4 B* (8b), (61) 
其 中 ,如 = A+8A. 
iR ARE 27, LA* 12841 <I, BP BT AR 
| B+ 1 << Jati 


“Ijara” 
(SE 4-231.) 
对 (61) 两 端 分 别 取 范 数 得 : 
lae] x {B+ alle] + 1*1? 8A T E] 
+A] i A*H a? t B+ ab] 
-ld8dllzir (051) + 84] ile] 
+SP] 


«EL pA iei Db] L8] 1840 fae] 


A4 iale] 


Ga 4 
=le larab , [Ati] ' 
 1—4 + OAF 十 dz 
=le] tiA tib] aimi uml 
1—4 
4| A*] ir: 
4E 
cay 
1 vun 
aet iat obl la] 
Ala Tiri 
CAL) 


把 末端 分 子 中 的 4 BAR LAT LIS AT RERA: 
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+ [bl + a 


<44 (2]èA]læl + [ob 
二 是 便 证 明了 估计 式 (59)， EE, 


ip) 


从 这 个 估计 式 可 以 看 出 , 如 果 残 量 [T| = |b - Av RE, 


则 摄 动 对 解 的 影响 也 就 越 大 ， 


推论 把 已 分 解 成 b= P. b+ P, b= bitb, 


4e cb, ATA Ib c Lam ean], m 
jal 
Tr ET 
Se (69) Bj 04844 SLROR BD OA HS 
Jõe] kA (A) Iri V [84] 
ja ^i-4 AH 4 ol 21) 74 
{bj [èb] 
ter wd 
其 中 ,x(4) - [Al 4*]. 
用 同样 的 方法 , 不 难 证 明 下 列 结论 ， 
(i) 超 定 满 秩 人 情形, BD mcn, rank(4) =n, 
Jòri < EA) I CA) irf) 1841 


ISl IÁ i-4 TT Ta] 
jbj job] 
er Bi] 


(ii) 常 定 满 秩 的 情形 , 即 m=n=rankl A), 


laz] pCA) / 84) ,195i 
< 了 


(ui) 亚 定 行 满 秩 的 情形 , 即 mn, rank( A) =m, 


根据 


(62) 


(68) 


(64) 
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Ihe] _ CAD / 18A] 18] 
< (65) 


从 以 上 这 些 估计 式 可 以 看 出 , QD, GH) 两 种 铺 形 ， 摄 动 
的 影响 比较 小 ， 而 这 两 种 情形 相应 的 方程 组 都 相 容 ， 在 (2 
中 , 如 果 方 程 组 相 容 ， 则 ?一 0, b =b, TÆ hyr Ñ (63) 就 
化 为 (64). 

最 后 , 我 们 要 着 重 指 出 ,上述 对 摄 动 的 估计 是 针对 原始 的 
最 小 二 乘 问题 而 言 的 ， 在 实际 进行 计算 时 ， 原 来 的 问题 已 经 
发 生 了 变化 ， 因 此 , 摄 动 的 影响 应 对 新 的 计算 问题 来 考虑 , 就 
我 们 在 第 5 章 中 所 介绍 的 算法 而 言 ， 最 后 总 大 把 问题 妇 结 为 
相 容 的 线性 方程 组 求解 问题 , 从 而 便 消 除了 残 量 的 影响 ， 
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P. 


第 edo 


病态 问题 和 病态 程度 的 度量 


S1 病态 问题 和 算法 的 数值 稳定 性 


1-1 irEBEBSERGIBS 
一 个 计算 问题 , 例如 关于 线性 方程 组 
Ax=5 (xm,bCZ^, À nxm Br) (D 
的 求解 问题 ,或 者 与 其 相关 联 的 矩阵 4 Bose [8] Bi, ri e E 
A 为 非 奇 异 , 则 道 年 阵 4 二 在 理论 上 是 存在 前 ,方程 组 代 ) 的 
w= Ab 是 唯一 的 ， 但 是 ,车 系数 矩阵 4 有 摄 动 34, 右 端 
I EE b 有 摄 动 Ob, 那么 ,相应 的 摄 动 方程 组 的 解 也 和 z= 4- 二 
不 同 ， 设 其 解 为 +6z, M æ- 52 淮 确 地 满足 摄 动 方程 
CA 4-8.4) (x -- 82) — b 5b, (9) 
根据 Banach 引 理 的 推论 可 知 , 从 理论 上 讲 , 只 要 147] [8A] 
«1, p Stati RB BE 4 二 84 总 是 非 奇 异 的 ， 于 是 ,中 上 Sme np 
ac -- 820 — (.44-6.4) 3 (b 4- 8b), | (3) 
我 们 已 经 知道 , 非 奇异 方 阵 的 道 矩 阵 是 连续 的 , 这 就 是 说 ， 
lim (A+óë4) t= At, 


Ió A= 9 
Aj, 24195), 1341 都 趋 于 零 时 ， 
lim (m+j 2@) = Hm (A-4-84) 1 (b -- 8b) 


18.4i20 
lób|—0 labi NI 


= A b=. 
这 就 是 说 ， 只 要 1841 和 168| 足够 小 ， 总 可 以 使 解 的 摄 动 量 
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[8a NEL EE SCHULE BER EE , Td EAR PF CA. 8440 7 th p ELB 
4 到 任意 的 精确 程度 , 实际 上 这 仅仅 是 一 种 纯 理论 的 结果 ， 
从 实际 计算 的 角度 来 看 , 问题 远 远 不 是 这 样 简单 ， 为 了 进 一 
步 弄 清楚 这 个 问题 ,我 们 先 指 出 以 下 两 点 ; 

1” 摄 动 是 不 可 避免 的 、 其 原因 有 二 ， 第 一 , 问题 中 的 数 
据 往往 是 由 实验 观测 (对 最 小 二 乘 问题 克 其 如 此 ) 得 到 的 ,或 
者 是 通过 计算 得 到 的 ,无 论 基 那 一 种 情形 , 都 会 出 现 观测 误差 
或 计算 误差 。 第 二 , 我 们 所 使 用 的 通用 电子 计算 机 的 字 长 总 
是 有 限 的 , 数据 输入 到 计算 机 中 以 及 在 运算 的 过 程 中 , 会 入 
误差 也 是 不 可 避免 的 , 原始 数据 即使 完全 精确 , 在 计算 机 中 也 
不 一 定 能 丝毫 没有 误差 的 表示 出 来 ， 这 两 种 情况 所 产生 的 影 
响 , 相当 于 原始 数据 的 摄 动 ， 我 们 计算 得 到 的 结果 , 实际 上 是 
某 一 摄 动 问题 的 精确 解 . | 

2 ” 单 从 计算 机 字 长 有 限 这 一 现实 来 看 , 摄 动量 的 相对 精 
度 , 例 如 1341/14| 或 1351/161, 是 有 一 定 的 局 限 的 , 它们 并 
不 能 任意 地 小 . 

根据 上 述 事实 , 对 于 一 个 给 定 的 计算 问题 ,我 们 必须 研究 
的 一 个 重要 问题 是 , 问题 中 参数 的 微小 摄 动 , 对 问题 的 解 会 产 
生 什么 样 的 影响 .这 就 是 问题 的 (理论 ) 解 对 于 参数 氢 动 的 敏 
感性 问题 ,为 了 具体 地 说 明 这 个 问题 , 今 举 一 例 . 

b) (R. S. Wilson) 今 考虑 系数 矩阵 为 4x4 阶 实 对 称 
矩阵 的 线性 方程 组 ; 


[0T 8 T wi r32 

T5685] | 28 

|8 6109 [2 , (4) 
|^ 88 

L7 5910lz,! Lg 


它 的 解 为 — [m, ta, za 24] = D, 1, 1, 1], 
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如 果 把 右 端 项 作 微小 摄 动 ， 
[7 7 8 ;| sit ÂZ 32.1 


7 . 2.9 
n 6 10 9 | za 十 8zs 33.1 | 
7 5 9 10-- g+ òta 30.9 
"E EHE LAE 7g 


[9.2, --12.6, 4.0, —1.1]7, 
从 这 个 例子 可 以 看 出 ， 右 端 仅 有 约 1/200 的 相对 摄 动 ， 
《 即 用 摄 动 后 的 右 端 作为 原 右 端 项 的 近似 时 的 相对 误差 )， 而 
解 的 相对 误差 却 放 大 了 约 2000 倍 ! 这 就 说 明 线 性 方程 组 (4) 
的 解 对 参数 的 微小 摄 动 十 分 敏感 . 无论 如 何 我 们 也 不 会 把 (5) 
的 解 当 成 (4) 的 近似 解 . 
如 果 把 (4) 的 系数 微 加 摄 动 
10 了 8.31 7.2 P% 824 
7.08 5.04 6 8 |Z | es] 
~ |” , (6) 
£z = 
31 


8 5.98 9.89 9 
6.99 4.99 9 9.98 J.z, 
其 解 为 [—81 197 —34 22], 
CR D 的 解 的 差异 就 更 大 了 . 
有 一 类 答 阵 叫做 Hilbert 888, 其 定义 为 


1 1 7 
low 元 | 
1 1 1 š 
H,=| Z 8 cUowei |. e 
i i ^1 
qom a+i ` 9n—i 


以 I IU SCROREE IIT TE H, RARR k SE BUS nox b BY SE 
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PEIUS EMRE REDEA, 也 上 共有 和 线性 方程 组 (4) 

Ze ES 9E Et, Bf EX, 第 小 摄 动 对 解 的 影响 也 就 越 为 严重 . 

值得 指出 的 是 , (和 07) 中 的 矩阵 不 但 是 对 称 的 ,而 且 还 
ARE E E BUND 

上 例 说 明 , 的 确 在 在 有 这 样 的 计算 问题 ， 二 中 的 参数 有 和 
小 的 相对 摄 动 时 , 解 就 会 引起 “巨大 ”的 相对 摄 动 ， 这 种 情 
我 们 称 之 为 问题 本 身 的 病态 性 质 . 反之 , RIS — 
TUNER DES OS REDE DERE Iya RK, 便 称 这 种 计算 
HAARA 

RRSGMIESGHRRUSTULA, 

e) 一 个 数学 计算 问题 的 病态 或 良 态 , 是 这 个 数学 问题 本 
身 所 图 有 的 一 种 属性 , 问题 的 病态 对 它 的 计算 会 带 来 困难 , 但 
病态 性 这 个 概念 本 身 并 不 直接 涉及 计算 这 个 问题 的 算法 .在 
我 们 打算 对 某 一 数学 问题 进行 实际 计算 的 时 候 ， 对 它 的 痢 坊 
性 是 必须 加 以 考虑 的 . 

2) 病态 各 良 态 之 间 并 没有 明显 的 界限 , 上 面 所 讲 的 病态 
或 良 态 的 概念 仅仅 是 一 种 “定性 的 ” 找 述 ， 从 实际 计算 的 角度 
来 看 , 我 们 还 必须 设法 从 “定量 "上 期 以 考虑 ， 这 就 是 说 ,我 们 
得 设法 对 参数 的 一 定 的 dh X] ERIA ERES FE Ha fii, 
从 面 判断 问题 的 病态 程 

3) 病态 问题 是 的 各 和 域 中 普遍 存在 的 问题 , 例 
如 ,代数 方程 求 根 , 微分 方程 求 数值 解 ， A R IRER RUER 
等 计算 问题 , 都 有 所 谓 病 态 问题 , BSN E Sz Do] RR SPESE JR D. 
及 它们 的 处 理 方法 , 是 计算 数学 中 一 类 十 分 重 归 的 课题 ， 在 
本 章 中 我 们 将 尺 对 本 书 所 涉及 的 线性 问题 进 4 行 初步 的 探讨 . 

12 算法 的 数值 稳定 性 概念 

在 对 问题 的 病态 积 度 进行 估计 之 前 ， 我 们 先 来 对 计算 一 
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个 数学 问题 的 “算法 ”以 及 与 其 有 关 的 "数值 稳定 性 ”概念 作 简 
单 的 介绍 .所谓 计算 一 个 数学 问题 的 算法 , 概略 地 说 , 它 是 某 
一 计算 方法 的 具体 实现 . 为 了 说 明 这 个 概念 , 今 举 一 例 . 

俩 ”二 次 方程 求 根 问 题 ， 今 给 定 一 个 二 次 实 系数 代数 方 
程 o2-HpzAHy=0。 它 的 两 个 根 可 以 用 公式 表示 成 
DPIN PI pa PONPA 

2 ? - 2 ? 

我 们 假定 p70, 9770, KP, JE VISUM K SQ 1225 
TY, 我 们 只 需要 把 公式 中 有 关 各 项 分 别 如 以 计算 就 可 以 了 ., 这 
种 盲目 的 作法 会 对 计算 结果 带 来 严重 影响 ， 今 分 析 于 下 , E 
为 . 


Zu == 


z = IPON P049 2 pt. p —44 
P 2 . 


而 包 又 为 正 数 ， 记 以 这 实际 上 在 右 端 只 要 把 V pig 计算 
出 来 , 再 执行 一 次 加 法 运算 就 可 以 了 ， 分 母 中 的 2, 在 二 进 制 
计算 机 上 相当 于 移 位 ,容易 实现 .但 是 , 由 于 49<p, WJ q X. 
为 正 数 ,所 以 p'—4g cp. 因此 , 在 利用 前 述 公式 来 实现 
o 的 计算 就 会 产生 严重 的 后 果 ， 因 为 分 子 的 计算 是 两 个 相近 
的 数 胡 减 ， 其 结 时 会 产生 很 大 的 相对 误 郑 ! ”这 种 情况 在 考 碟 
算法 时 必须 予以 重视 , 设法 避免 .对 本 例 的 具体 情况 ,我 们 可 
以 采用 两 种 方法 来 克服 上 述 困难 . 第 一 种 办 法 是 ; 计算 mw 的 
公式 等 价 于 


rr AMEN 
` R(—p-A/p—4q) PA pág ° E 
出 于 在 计算 wo 时, pty pig 已 经 计算 出 来 了 , NEEM 
行 一 次 除法 运算 就 可 以 了 ， 这 就 避免 了 相近 数 相 减 这 种 不 利 
情况 , 我 们 顺便 指出 , 数学 上 的 所 谓 等 价 囊 达 式 , 在 实际 计算 
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中 是 并 不 等 价 的 , 不 同 表 达 式 的 计算 结果 可 能 会 有 很 大 差异 . 
当然 , 这 里 的 运算 是 措 在 仅 具 有 限 字 长 的 计算 机 上 进行 的 . 第 
二 种 处 理 方 法 是 ， 在 za 计算 出 以 后 ， 根 据 根 与 系数 的 关系 
viva 一 9, 从 而 有 v1 一 9/xs， 作 一 次 除法 就 把 vi 计算 出 来 了 ， 

所 谓 算法 , 说 得 确切 一 些 就 是 . 一 些 数据 , 它们 可 以 是 事 
移 给 定 的 或 者 在 计算 过 程 中 的 中 间 结 果 ， 按 照 规定 的 顺序 进 
行 运算 的 一 个 序列 ， 

建立 一 个 好 的 算法 并 不 是 一 件 容易 的 事 。 在 建立 算法 时 ， 
有 许多 事情 应 当 予 以 注意 , 例如 , 原始 数据 和 中 间 结 果 的 存 幅 
(对 大 型 问题 尤其 如 此 ), 运算 量 的 大 小 (特别 是 乘 、 除法 的 运 
算 次 数 , 不 呵 的 算法 也 会 有 很 大 差别 ), 在 什么 时 候 应 当 使 用 
多 倍 和 精度 运 算 以 及 如 何 充 分 发 挥 计算 视 本 身 的 功能 ， 此 外 ， 
对 于 计算 数学 工作 者 来 说 , 一 件 十 分 重要 的 事 是 , 如 何 避 免 在 
计算 过 程 中 舍 入 误差 的 积累 ! 对 向 一 个 计算 问题 , 不 同 的 算 
法 , 由 于 舍 入 误差 积累 而 产生 的 影响 也 会 有 很 大 差别 ， 前 述 
二 次 代数 方程 求 根 的 例 , 就 说 明了 这 一 点 。 这 个 问题 就 是 算 
法 的 数值 稳定 性 问题 ， 即使 一 个 非常 良 态 的 问题 ,如果 使 用 
算法 不 当 , 也 可 以 使 计算 结果 遭 到 完全 厂 坏 , 使 其 变 得 毫 无 意 
X. 为 了 说 明 这 种 危害 , A BP. 

线性 方程 组 

[5 
£-4-9—2 

EIER pru, 即 系数 的 微小 摄 动 对 解 只 产生 很 小 的 影响 , 但 
是 ， 如 果 我 们 使 用 Gauss 消去 法 而 按照 自然 版 序 选 主 元 在 十 
进 制 三 位 浮 点 数 的 机 器 上 进行 计算 , 具体 情况 如 下 ; 

以 第 一 方程 中 的 系数 0.0001 为 主 元 从 第 二 个 方程 中 
消去 2 得 
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—10000y— —10000, BH] gy-1, 
代入 第 一 个 方程 得 
0.0001z+1=1, 
HE) c-—0, WE DLS yg h y 的 系数 为 主 元 , 从 第 一 
个 方程 中 消去 y 便 得 到 
z=1, 

代入 第 二 个 方程 就 得 到 y=t， 它 们 和 准确 解 +=4.0001, y= 
0.9999 相 比 , 准确 到 三 位 有 效 数字 . 

以 上 二 例 都 说 明 对 同一 全 计算 问题 ,使 用 的 算法 不 同 , 效 
果 也 大 不 一 祥 , 于 是 就 产生 了 关于 算法 的 数值 稳定 性 问题 

算法 的 数值 稳定 性 和 问题 的 病态 性 一 样 ， 都 是 就 吾 相 戏 
比 而 言 的 ， 从 这 种 意义 来 讲 它 们 都 带 有 相对 的 性 质 ， 如 何 来 
判断 一 个 算法 的 数值 稳定 性 的 好 坏 ， 需 要 应 用 合 入 误差 分 析 
的 方法 ， 关 于 舍 入 误 善 分析， 一般 说 来 有 两 种 途径 .一 种 是 
历 谓 向 前 误差 分 析 ， 即 根据 计算 机 中 浮 点 算术 运算 的 舍 入 误 
差 传播 规律 , 在 算法 执行 的 过 程 中 逐步 作出 估计 ， 这 种 方法 ， 
一 方面 十 分 旨 事 ， 同 时 ， 逐 次 所 作 的 估计 也 比较 保守 ( 当 
然 也 可 以 应 用 统计 的 方法 加 以 改善 )， 另 一 种 方法 ， 就 是 由 
Wilkinson 所 提出 的 向 后 误差 分 析 方 法 ， 对 于 一 般 的 线性 问 
iH, 应 用 比较 方便 . 现在 , 我 们 以 线性 方程 组 为 例 , 来 简略 说 
明 向 后 误差 分 析 的 基本 思想 , 并 在 此 基础 上 , 说 明 算 法 的 数值 
稳定 性 的 意义 和 判断 方法 . 

设 给 定 求解 的 线性 方程 组 为 

Ag — b, (a) 

其 中 4 8— 4 nxn MERRER, b AAEN «IEEE, x 
为 待定 的 ” 维 向 量 , 应 用 某 种 算法 , 例如 Gauss 主 元 素 消 去 法 
求解 时 ， 我 们 得 到 的 解 E, 它 仅 是 方程 组 (a) 的 一 个 近似 解 . 
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然而 , 我 们 却 豆 以 根据 浮 点 运算 的 误差 传播 规律 , 对 这 个 算法 
的 过 程 加 以 分 析 , 最 后 可 以 得 到 这 样 的 结论 ,我 们 计算 得 到 的 
近似 解 乍 ， 实 际 上 是 某 一 个 摄 动 方程 
(A--8.4)86 — b -- 8b (b) 

的 准确 解 ， 在 这 时 起 重要 作用 的 是 54 的 大 小 。 我 们 可 以 对 
SA 作出 估计 , n FR EE EP AE I BER, 其 天 小 也 各 不 相同 ， 
[3A] 的 大 小 , V em TRE FEL EUER 19A] fr, 
雇用 算法 的 数 售 稳 定性 也 就 愈 好 ， 这 种 方法 , IERRA 
及 线性 最 小 二 乘 问题 求解 ,者 同样 适用 ， 这 是 一 各 有效 的 误 
差分 析 方法 . | 

1-3 ”病态 程度 的 度量 

在 前 面 我 们 对 一 个 计算 问题 的 病态 性 质 这 个 概念 ， 作 了 
概略 的 定性 说 明 . 现在 我 们 来 考虑 如 何 对 问题 的 病态 程度 作 
BER. 为 了 便于 说 明 ,我 们 把 所 考虑 的 计算 问题 表示 
成 方程 - 


1 f(x, B)==0 (8) 
的 求解 问题 , 其 中 的 8 为 问题 中 的 参数 向 量 , e 是 待定 向 量 ， 
我 们 假定 如 就 是 方程 (8) 的 理论 解 . 若 参 数 8 有 摄 动 98, 我 
们 设 e + óc. 为 摄 动 问题 
f(x-c8w, B--88) —-0 (9) 
的 理论 解 。 因为 已 经 有 了 范 数 概念 ， 这 就 对 我 们 考虑 这 样 的 
问题 带 来 很 大 方便 .我 们 可 以 用 15B8|/1B1 ERARA 
摄 动 景 ( 或 称 之 为 相对 误差 )， 解 的 相对 误差 就 可 以 近似 地 表 
示 成 jz%1/izl 或 18slMiw sell 如 果 我 们 能 够 对 解 的 相 
对 摄 动作 出 估计 , 例如 


del ~, lB s 
I ror — 18i ,& 81-0, (10) 
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HW e 是 一 个 正常 数 ， 它 表示 参数 的 相对 摄 动量 对 解 的 相 
对 摄 动 量 影响 的 程 蜂 ,或 者 说 它 是 相对 误差 的 放大 率 . 常数 
因子 e 的 大 小 就 是 问题 病态 程度 的 反映 . ,因此 , 我 们 便 称 因 
子 c 是 癌 题 (8) 的 条 件数 ， 

应 当 指 坦 ， 在 这 里 我 们 所 以 缕 考 虑 相对 报 动 而 不 直接 考 
虚 绝 对 摄 动 1581 和 [92]. 其 原因 在 于 只 有 相对 摄 动 才能 反 
Birds. f 

我 们 还 要 指出 , 求 得 近似 等 式 (10), 一- 般 是 非常 困难 的 ， 
实际 上 , 对 于 一 般 的 线 注 问题 ,我 们 能 够 得 到 估计 式 ， | 


ipeo S p a 


现在 我 们 以 线性 方程 组 (a) 的 求解 为 全 ,来 给 出 条 件数 的 
具体 信 计 . 
:根据 第 3 章 人 1 中 的 公式 (9), 当 14-1D1541<1i 时 
B3 A= --B-1(8A)A-1, B= A+8A, 
JHB b peti, TERRI b RA 
fox « [B7 11541 æ 


domi -AiAi 
= ` <= rajia 村 
i 141. 
An js] 5 jæ] Rid, MAC 
` (A+8A)(z-+-8z)=b 
立刻 可 以 推 得 与 (12) 近 似 的 不 等 式 


«|An asi BAT, (18) 
NAM 不 E 例如 , RIRE 
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| A wl = 147] jw], wo, 
任意 给 定 小 常数 830, 令 æ= BAw, x485xz-—w, b= 
(A+BI)tww, 8A— BI, 总 有 
Ae —b, (A84) (a -8x) = 
|t = |8| LA^ tw] = [84] | 471] [2-82], 
从 而 有 


Š L a e AT 


只 要 - BREN: 了 À 35488, AE FEE: 
A484— A4 BI 
总 为 非 奇异 . 
其 次 , 如 果 和 矩阵 A 没有 报 动 ， 而 只 有 右 端 向 量 如 有 接 动 
8b, dt Am—b, A(z--3m) 一 B+58, 可 证 不 等 式 
Dei «471141 E (15) 


b 
Bor, es bI Re c, 5 4.0, 
ERRE, CIO) AEHLARSGM. BA, BGETXEDQEROD 
+0, x+0, {E 
[478b | - LA? ]18b], Aæ] = | Aa], 
于 是 ,因为 45% 一 65, 所 以 52 一 414-18b, 从 而 有 
| im — |. A71] 155], 
显然 有 等 式 : 
A |A73| Af Tet. (18) 
从 以 上 的 讨论 可 以 看 出 ， 在 (12), 3) (1) 中 都 出 现 
了 一 个 共同 的 因子 」4 -二 4 这 个 因子 就 相当 于 (11) 中 的 内 
d 6 , 它 反 映 参数 的 相对 摄 动 对 解 的 相对 报 动 的 影响 , 因此 我 
们 有 
定义 1 今 规定 AJAH 为 线性 方程 组 Amb 求解 
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而 题 的 条 件数 . 
KTERE 4 BR: B, ABE ASAL, 则 根据 
第 3 章 4-1 中 的 公式 (d) 
B3-A3-—B3(84)4?, B-A4-8A, 
立 得 [B^—A^7|«[B^[94[] A|, 
B I 
[BAL < ISA A| 
fai 1—|5A| lam] 
. 1AA] 18A 
-Tf an 
由 此 可 以 看 出 , 因子 AHIA ARR RAKAT, 所 
A, AHA 也 是 非 奇异 矩阵 求 逆 的 条 件数 . 或 者 简称 之 为 
矩阵 A 的 条 件数 , 记 作 
E(A) —- LA^! T1AT. (18) 
因为 本 书 中 一 般 只 使 用 和 矩阵 的 谱 范 数 , 所 以 ,上述 条 件数 又 可 
以 称 为 矩阵 4 的 说 条 件数 . 根据 矩阵 的 范 数 和 它 的 奇异 值 之 
间 的 关系 , RE CAD. 的 表达 式 (18) 可 以 表示 成 


k(A) - 2 (9) 


Eh A A An 分别 为 非 奇 异 抢 阵 的 最 大 和 最 小 奇异 值 . 

第 一 小 节 方 程 (4) 的 系数 矩阵 4 是 正定 的 ， 它 的 最 大 和 
城 小 特征 值 分 别 为 . 2 22890.2887, 142:0.01015, 可 知 RCA) = 
At 2984 2.084 x 107, 


1-4 病态 程度 的 度量 ( 续 ) 

在 前 一 小 节 我 们 己 经 对 一 般 的 线性 方程 组 求解 以 及 非 奇 
异 污 阵 求 逆 问 题 的 病态 性 程度 作出 了 和 估计， 并 建立 相应 于 这 
两 个 问题 的 条 件数 概念 及 其 表达 式 ， 在 这 一 小 节 中 我 们 将 就 
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广义 逆 和 矩阵 At 的 计算 问题 以 及 与 其 相关 关联 的 最 小 二 乘 问 是 
的 病态 性 程度 给 出 相应 的 条 件数 . 根据 前 一 章 中 对 工 "B 
式 (37), ddl moo BEBE A m B, BAHR 
LB* Aris GA LB* 1 LB* [24- ]4*1*) B— Al. 

现在 我 们 令 B—A-8A, HEE rank(B) -^rank(A), 3E 且 
[A*||84] «1, RE | 
lar 
(a 32 


EM 


iB+ - A* | (i +I] heat. 


Mm TID en A: 


B+ — «qai i4] . 
| em Al semen) ) i47] ME | TP (20) 
其 中 | yt de 
i 4-|4tal @D 
i38 JBA da KANAALS 则 不 等 式 (30) 就 化 为 
000 qtue di 
IPTE sonas i4] D i e 


在 论 从 估计 式 (20) 或 (22) 都 可 看 出 , 因子 143141 都 是 反映 
计算 广 a ERR SERRA M ui. A Bv, REUS 


EX? zin [ails IF Xe. A* 问题 

的 条 件数 ; 并 仿 记 之 为 mE m 
UU w DPH. " (98) 
T 3841 ES TE Rd SEA [8] Bu >ë BE rank( A) =k, 则 条 


件数 (283) 可 以 用 4 的 最 大 奇异 位 " MM 奇异 值 A GER 
成 


BAJER . Q4) 
k 


所 以 ,对 于 计算 广义 逆 矩 阵 47 的 条 件数 , URL IB E 4 的 
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TAPER NRW, Hu RA 为 方 阵 并 且 非 奇异 ，(24) 和 和 (19) 相 
”现在 我 们 米 考 起 想 应 的 线性 最 小 二 乘 问题 题 ， mem 
性 方程 Am — b B SU NS RREA, “E ë AED 都 
让 波动, Uu IRR 曲名 为 arca, JI 
g-- 82 — (A3-845* (+b), 
T upp x: 6 A09), 设 . . 
rank( AtA =rank(A), [A*[5AI 1, 


jaa: «T (215411 aed abba. spei 


aAa UP 
— zi BAY Ta LN 人 
— du] Se [4e ) [A] E 
ibi. jb] o. 27 d9 
c idm, 5| |, E (28) 


h r-b- Am. " o a 
PN- SE SB RA) - AA 也 反映 最 
TREERE 4 Pt. | | 
3 F5EBE RI Bas Tis E . 

非 奇 异 方 阵 求 闻 和 相应 的 线 竹 方程 组 求解 问题 是 一般 疯 
mxa HERE A 计算 广义 道 矩阵 4+ 和 相应 的 最小 二 乘 问题 
求解 问题 的 特例 ,它们 的 条 件数 也 同样 如 此 现在 我 们 就 后 
者 列举 关于 条 件数 ACA) 的 若 于 简单 性 质 好 下 ， 这 里 我 们 假 

XE 4 28 m xm f, mmn, rank(4) = k, 4 的 最 大 和 最 小 奇异 

" 分别 为 hz 和 和， 

1? E(A) 21, Eg MAn (A) Dus, 

2” 对 任何 o0, E(a4) - CA). AN aA 的 最 大 和 最 
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小 奇异 值 分 别 为 1o] A 1d 2a, BEI klad) — 1a] AI lo] M 
=/= (A). 

9° fE F š P 4 的 条 件数 不 变 , 即 对 任何 mxm 
阶 直 交 阵 , Bio P (QA) = k( A). 

KH (QA)! (QA) = ATA, 所 以 QA 的 奇异 值 和 44 的 完 < 
相同 . 

4° B Q, HERR mxh KIEZER, mcs, WJ EC) 
=İ, 

因为 Q= In, BEA Qu 的 大 个 奇异 值 帮 是 二， 

1-b 奇异 性 和 病态 概念 的 区 别 

在 本 节 的 末了 ， 我 们 打算 对 奇异 性 和 病态 这 两 个 概念 作 
进一步 的 阐述 。 首先 我 们 要 指出 , 奇异 性 和 病态 性 这 两 个 概 
” 念 分 属于 两 种 完全 厅 同 的 范畴 例如， 对 方 阵 A 来 说 , 奇异 
性 是 和 通常 意义 下 的 逆 征 阵 A REFERAR. WRA 
和 矩阵 4-1 不 存在 ,使 称 这 样 的 矩阵 是 奇异 的 ， 说 得 更 具体 一 
些 ,就 是 如 果 存 在 同 阶 方 阵 B, CRAM: BA=AB=I, R 
们 就 称 这 样 的 矩阵 4 是 非 奇异 的 ，B 就 称 之 为 4 BJ D. 
同时 , 奇异 性 又 是 某 种 意义 下 的 间断 性 .这 种 间断 性 表现 为 : 

# (AJ 是 一 个 非 奇异 矩阵 序列 ， 其 极限 为 奇异 矩阵 A. 
BUS A. 非 奇异 , 所 以 对 了 -二 2, e, SAPE 47! 都 存在 , 但 
是 极限 


lim A! 
io 


却 不 存在 .加 果 把 4; 当 作 一 个 抽象 的 变量 , 把 aC 当 作 这 个 
变量 的 函数 SA) ,那么 , 当 4 一 4 时， 函数 SA 的 极限 不 
存在 , 而 且 这 个 函数 在 4 点 根本 就 没有 定义 .不 但 如 此 , 2616 
如 何 规定 4) 在 4 点 的 值 , 都 无 法 使 它 在 4 GEH. Hes 
话说 , 4 还 是 f CA) 的 一 种 不 可 移 司 断 点 ， 
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至 于 病态 性 这 个 概念 , 这 是 针对 某 一 个 计算 问题 而 言 的 ， 
它 是 这 个 计算 问题 的 一 种 属性 ， RER 4 的 求 逆 问题 (在 通 
常 的 意义 下 ) 来 说 , 如果 是 奇异 的 , 从 逻辑 上 来 说 , 就 根本 不 会 
有 求 道 问题 . 入 们 决 不 会 去 寻求 明知 是 理论 上 不 存在 的 东西 ， 
只 有 和 矩阵 4 为 非 奇 异 , 才 会 发 生 它 的 求 逆 间 题 . 计算 AC 这 
个 问题 的 病态 程度 如 何 , 说 得 通俗 一 些 , 就 表现 在 关于 AUT 的 
计算 是 否 容易 实现 . 

其 次 ， 关 于 以 4 为 系数 矩阵 的 线性 方程 组 (在 通常 意义 
下 ) 的 求解 问题 , 在 前 面 我 们 考虑 这 种 计算 问题 的 病态 性 质 的 
时 候 , 我 们 曾 假设 矩阵 为 非 奇异 的 ， 而 摄 动 怎 阵 4+34 也 是 
非 奇异 的 , 从 麦 面 看 来 , 似乎 方程 组 求解 问题 的 病态 性 质 和 扼 
阵 4 的 非 奇 性 有 所 联系 ， 这 仅 是 一 种 表面 现象 。 我 们 之 所 以 
要 作出 关于 矩阵 4 的 非 奇 异性 的 假定 ， 是 由 于 这 一 类 计算 问 
BEKEER, BE, MERKER 4 为 奇异 ， 仍 然 存在 
着 这 祥 的 线性 方程 组 的 求解 问题 ， 甚 至 是 在 通常 意义 下 的 求 
解 问题 、 当然， 我 们 要 假定 这 个 方程 组 是 相 容 的 .虽然 系数 
EREA 为 奇异 , 但 它 和 这 个 求解 问题 是 否 病态 全 无 关系 ， 相 
应 的 求解 问题 可 能 是 病态 的 , 也 可 能 是 良 态 的 , 究竟 如 何 , 可 
BIA IA 的 大 小 来 判断 , 而 At 的 存在 是 和 和 矩阵 4 是 否 
奇异 没有 关系 的 . | 


$2 数值 相关 性 理论 


21 引言 

在 前 一 节 中 ， 我 们 已 经 对 数学 计算 问题 的 病态 性 质 这 个 
有 具 重要 实际 意义 的 概念 作 了 简要 的 阐述 .我 们 的 讨论 虽然 是 
针对 本 书 所 涉及 的 有 关 有 限 维 线性 问题 进行 的 ， 但 是 它 的 实 
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际 意 义 利和 作用 却 更 为 广泛 ,一 方面 ,计算 问题 的 病态 理论 , 对 
线 活 癌 题 六 得 到 的 结果 ,对 于 一 般 的 非 线性 问题 ,在 研究 筑 沪 
的 理论 上 时; LE FEES, 众所周知， pi iyan 
REEN, SEE EVRSETEN. Pup EANA E E 
线 竹 方程 组 的 一 类 重要 方法 , 在 迭代 过 程 中 的 每 一 步 ; 都 遇 到 
一 个 以 Jacobi 和 矩阵 为 系数 乱 阵 的 线性 方程 组 的 求解 问题 , 而 
相应 的 Jacobi 4RR NAIR, 对 牛 瑟 革 的 实际 效果 ， 有 不 
可 忽 说 的 影响 。 如 和 何 改善 这 种 状态 , 仍 是 值得 进一步 研究 的 
HUE. 在 无 约束 非 线 性 最 优化 方法 中 ， BA BUREUB SEE RT 
EiL BREAD A TARRAA RA, m nb 
IH HAE Hosse TRPEXERIZTTR, di HE, "m Tosse PRA hs 
态 人 性 郑重 的 话 , 3E UU AE dE EDEERS. 33 711, 8 AK 31 SRL 
EATER BE AS pA EARRA, qui YEICIEXIDT EROR E 
题 , 具有 明显 的 优点 ,: 关键 问题 是 迭代 法 的 收 全 速度 ,而 迭 我 
法 的 ; UL GERE RU D TAB ERREUR HE. SEAT ESL 
速度 ,妓生 设法 改善 迭代 矩阵 的 条 件 .， BETERA tak 
| HERBA a Us, .实际 上 就 是 实现 这 种 妃 想 的 一 神 其 栖 
方法 .近年 来 , A] 4T P o (Pre-oonditioning)H]J836 uray 
BITH, H di SES) AMETS CUL, JREL EL 2 Wk HERE D SCARE, 我 
TIPI, Ex ERES, PCH BJ e FUL BB ST ABEB3N COS II 
ES SETS LES BUDE, XEYDSLAXUCLDON RT Sura 8 BL -F 
分 重要 的 实际 意义 . ,对 于 开展 "处 埋 病 态 问题 的 理论 和 方法 ” 
的 研究 ,应当 注意 两 个 盘面 ; 其 一 是 如 何 建立 对 病态 性 程度 判 
所 的 有 效 方法 ， 共 二 是 在 病态 严重 时 如 何 加 以 处 理 以 改善 算 
法 的 效 困 .在 这 一 章 电 我 们 着 重 讨论 病态 性 程度 的 判断 问题 . 

2-2 Gram 行列 式 的 一 些 重要 性 质 

Ti sed 理论 无 论 在 纯粹 数 : 学 的 研究 中 以 及 在 数值 计算 的 
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研究 中 都 非常 重要 ， 得 是 ,十 典 的 伐 性 相关 性 理论 , 有 很 大 的 
BRE, 为 了 运 应 数值 计算 研究 的 需要 ， 必须 进 一 步 加 以 发 
展 ， 让 本 章 中 我 们 将 用 定量 前 方法 对 线性 相关 性 的 古典 理论 
进行 改造 , 为 研究 油 态 问题 的 理论 与 应 用 提供 必要 巷 础 ， 为 
Ti B 我 们 首先 对 有 关 Gram 行列 式 的 一 些 重要 RR 
作 简要 的 介绍 . | 
设 Q, G, +, d, F m Ap m 2E A p] se, JP IA. dd 
As 为 以 eu, ns, m HIER moe WEAR PS, Bm, 
Ay [G1, +, &;] (36) 
T EDR GS, n, m, HREM 28 ht: JACOB Y E, FERRIE 
的 常数 oo ob $E - 
二 co 十 一 0 
这 就 是 说 ,一 个 向 量 系 从 理论 上 讲 , 不 是 线性 相关 成 是 线性 独 
x2 从 线性 独立 测 线 性 相关 没有 一 个 量变 过 程 .- 它 是 出 一 刀 
切 的 方 江 来 定义 相关 性 这 个 概念 的 . JUS SE BU fR EE, X: 
样 的 定义 是 非常 清楚 的 ， 但 是 , 从 数值 计算 的 角度 来 看 , 这 个 
概念 往往 就 会 变 得 模糊 不 清 ， 从 这 个 定义 出 发 , 用 数值 计算 
E AED 常 1 HE 
ZEM, AME 现 出 十 典 的 线性 相关 概念 ， Peur Iti 
| NO V HDSEÜSXR CERDOS Sh NET 性 相关 
重 受 概念 进行 改造 提供 必要 的 基础 . I 
根据 古典 的 线性 相关 性 理论 ， 向 量 系 a,, =, G, 为 线性 
搬 关 的 充分 必要 条 件 是 这 个 向 量 系 的 Gram 行列 式 为 零 ， 
. det(A Aj) 一 0， (27) 
其 中 ,XB WERE ALTA. WIG, 从 元素 为 
d; ala; 4, j=1, 2, =, h, 
为 了 用 定量 的 方法 来 研究 线性 相关 性 的 数值 理论 ， 我 们 


SL”, 


有 必要 对 向 量 系 的 Gram 行列 式 的 若干 重 要 性 质 加 以 分 析 ， 
为 便于 讨论 ， 我 们 把 向 量 = Gi, t, Ut a; 的 Gram fi 
列 式 用 记号 表示 成 


Gia, =, a,]. (28) 
首先 我 们 假定 向 量 系 a, dus e, d, 是 线性 独立 的 ， 从 而 就 
保证 了 它 的 任何 子 系 ai, o, a, 也 是 线性 独立 的 ， 记 部 为 
HER di, ---, G, 所 张 成 的 上 维 子 空间 ， 


S, = Spaníd,;, .…, ax}. (29) 
然后 作 空 间 2” J 8 2 A NR 
of" = DONE. (30) 
于 是 ,空间 AP" rh E] e d nf DARE Hh 32 3: BR. 
š m=t-rFt, 
ucS, (81) 
ee S. 
HE eo E: Bj St z gx 


S; 上 的 直 交 投影 , 其 
KE fol RENE e 
图 4-1 到 子 空间 S, 的 最 短 
IER., A= |o]. 今 确定 的 值 于 下 . 
显然 ,向量 是 之 在 SP 上 的 直 交 投影 ,所 以 可 用 直 交 投 
影 敌阵 把 名 表示 成 . 


v= (I~ ArAi)w, 


于 是 
jo):=w"(7T— AAt), (32) 
因为 rank( 44) =£, 
所 以 At = (AT Ap) IAT, 
Y= (ALA,) AT, (33) 


则 利用 Cramer 法 则 , 可 以 把 向 量 的 分 量 ma, m EUER, 
1 
Kar 
(a,, QD (Gi, G; i05, Xd, G. y (04, G.) 


(ar, G.)--(G,, Ajar, aX, Aiyola, d) 


[aa d) (di, Aja, ir) (a,, axXa,, z) ] 
Ka, 45) (G,, G; .,Xa,, a; D (as, aX, x)| 
—-(-1*7A/G, (QR X XBHB 4) 
其 中 G,-G[a; 5 dU. ATER 


[€]? — xTa — a7 AL Ato, 


- | @, 206. Z Dia, 2)4,] 


(a5, m) 
1 At Ay 
=Z et (a, m) 
L (a1, ©) (Gy, X) (x, x) 
=G [d +, dy, x]/6G;,, (34) 
即 P-G[a, =, dr, 2)/G(as, =, aJ, 
或 . 
G[a,, --, ax, a] = G'la,, --, d]. (35) 


据 此 便 得 到 下 列 关 系 ; 
- G [a,, as] =|v:]°G [a] = 10] a], 
G[a,, as, as] = |V| °G [Gs, æ], (86) 


下 名 和 
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其 中 前 向 量 e;(j-1, =, &-1) ËR G; 在 S+ 上 的 直 交 投 
A 
从 (38) 可 以 看 出 ， Gram 行列 式 具 有 明显 的 几何 意义 ; 
Gie] =le, 这 就 表示 G Tau] JE B] S a, 的 长 度 平 方 。 
Ge, as] = [vl daa], 表示 以 as, a, 为 两 边 的 平行 四 边 形 
EARP, i GT, as, as] 一 | 上 vol?G [a a] 就 表示 以 
问 量 Gi, Go, Gç 为 三 条 楼 的 平行 六 面体 的 体积 的 平方 ， 余 类 
JE, | 
EU bame, 我 们 便 不 准 推 Gram 行列 式 的 下 列 重 
Joke VE. 我 们 总 假定 di, as, e, On 为 线性 独立 , 于 是 有 
(p HF h=1, 2, e, m, in 
Gia, =, a4] 7-0, mE 
2° Xt p po, eu P NARAZI, 2, 3, …; 天 的 任何 一 
种 排列 , MEA 
G[G5, ap + n] -G[a., a, +, Ar], 
这 就 是 说 ,任意 交换 庄 aa 的 次 序 , Gram 行列 式 的 值 不 变 . 
因为 这 种 向 量 次 序 的 交换 , 相当 于 在 行列 式 
det( AZ Ar) 
中 了 的 相 应 的 行 5 GZA SAZAN 出 于 交换 次 数 
恒 为 偶数 , 所 以 行列 式 的 值 不 变 ， | 4 
3 G[d;, --*, a,] SG [a1]G [a] G a]. u 
| 这 个 不 等 式 可 以 根据 (36) 直接 推导 出 来 . 因为 vs 是 向 
Eaka f i 张 1 维 子 空间 的 直 交 补 空间 上 的 直 交 投影 ,所 以 
Je: | «jas. AE G [Eas 5] < [as 6 [04] =G 1G L5]. 
利用 归纳 法 便 不 难 证 明 不 等 式 8°. 
4” 上 述 不 等 式 可 以 推广 到 更 为 一 般 的 形式 ,. 
G[ds, ---, a] «Ga, --, OdG Gu, °, Gy], 
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Fah < r<. 
D^ d Gd», G, HJ BE, 则 8° 变 成 等 式 : 
Gdi, +<, ay] =G [a] G [v5 G [a]. 
ARBRES Gp e, G, 和 向 最 系 dua, co, du WEAR, RC 
u (&,, G) =0, 对 i=l, 2, ++, jor, e, Ë, 
MJ 4° 变 为 等 式 ， | 
Gas x -6Gl[gsi, +, a,]G [os Ue, G5, 
G bi eo b, 为 一 直 交 系 , 并 且 
ib] [a], i=1, 2, +, k, 
WE ^^ Glas, a< G[b, s ds 
并 所 等 导 只 有 在 a), ---, ay 也 是 一 个 直 交 系 时 才 成 立 . 
这 就 是 说 , 在 长 度 相 同 的 向 量 系 中 , 以 直 交 系 的 Gram fi 
列 式 的 值 为 最 大 . 
道理 很 简单 , 因为 G [as ---, ax] [01-0 [a] ,如 果 
(au HERR, 则 等 式 成 立 ， 反 过 来 , 若 有 任何 两 个 向 量 不 直 
交 , 据 (36) 就 不 难 证 明 等 式 不 能 成 立 . 
23 ”总 体 相关 性 和 想 对 相关 性 
”现在 ， 我 们 便 来 着 手 在 相关 性 定性 理论 的 基础 上 进行 定 
量化 的 工作 ， 为 此 目的 , 我 们 首先 对 向 量 系 的 线性 相关 性 程 
度 建立 一 种 明确 的 定量 表示 方法 、 今 假定 我 们 所 考虑 的 向 量 
JC (ai, ---, au), a 都 是 色 维 向 量 , 是 mn, BPIH, 
是 对 这 个 向 量 系 进行 规范 化 ， 即 对 向 量 系 中 的 向 量 都 乘 以 一 
个 共 问 的 因子 , 使 
max lax|=1. 
这 时 ,显然 有 
Ox GG, *…, g,1<1, £—1, 2, --, m, (91) 
Jt B, 只 有 在 向 量 系 ds, ---, a, 为 一 标准 直 交 系 时 , Gram 行 
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列 式 Glan --, ml 才能 等 于， 在 这 个 问 量 系 为 线性 相关 
时 , Gram 行列 式 的 值 才能 为 零 . 

(D 总 体 相关 性 

定义 3 设 8 为 给 定 的 一 个 正 小 数 ,0 二 s 过 1, 若 

Gla, ee, ap] <s, 
Sk PR RIED da, ce, G, 为 RERA. EATE- E 
H9, 0 二 5<1, 有 
Gi [ai +, G] >à, 

[EUER [8] RE Z Ya, nn, G, 为 8- 线性 独立 . 

根据 这 个 定义 , 显然 可 知 ; 

1) FHEA, +, G, 为 e- 线 性 相关 , 则 它 的 任何 一 个 
扩张 系 ax, nn, a, rz E 也 必 为 s- 线性 相关 . 

2) ZW] da, e, G, 为 8-- 线 性 独立 , 则 它 的 任何 子 系 
ai, 75, G,, ph, Au y 8- 线性 独立 . 

3) HEC Gi, 75, G, 为 s- 线 性 柱 关 或 0-2 PE gE v [8] 

量 的 排列 顺序 无 关 . 

定义 中 的 正 数 s 和 5 就 是 向量 系 (就 其 总 体 而 za, e, 
d; 的 线性 相关 性 程度 或 线性 独立 性 程度 的 一 种 度量 . 

定理 1 在 直 交 变换 下 ， 向 量 系 diy e, a, 的 相关 性 程 
度 ( 或 独立 性 程度 ) 不 变 . 

证 明 i Q WERK m x m 阶 直 交 阵 , m 

[Qa., =, Qa] =Q[a,, =, e] =QA;,, 
AWE (QAr)  (QA,) = AZQTQ A, = AT A 
SHEH T 
G[QA;] =G [Ar]. 证 毕 ， 

ME 为 了 简单 起 见 ,我 们 把 Gid, -, dili GLA 
把 G [Qas, …， Qav] 记 成 GRAJ, 
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E32 Rer Ba te, Bre 为 给 定 的 正 数 , 在 满足 关系 
[dij =b; i=1, Ut k 
的 一 切身 量 系 {(@1,，…, m0) 中 ， 直 交 系 具有 最 强 的 线性 独 : 
MPE. 
因为 , 在 定理 的 条 件 下 , 只 有 直 交 系 才 使 Gram 行列 式 的 
值 为 最 大 . 
定理 3 在 向 量 系 规 范 化 的 情况 下 ， 
G [a., Ut, ax] < min lal, k=1, 2, t m. (88) 
证 明 很 简单 , 从 略 . 
(II) 相对 相关 性 
首先 我 们 假定 向 量 系 a,, 0, a, 为 线性 独立 。 对 于 给 E 
的 向 荆 Y, 现 在 我 们 来 考虑 它 关 于 向 量 系 g4，…，GMITs8Sm) 
的 线性 相关 性 程度 的 度量 问题 。 为 了 这 个 目的 , 我 们 来 考虑 
用 大 维 子 空间 
S, —Bpan{q, t, ej) 
中 的 问 量 逼近 向 量 ac 的 问题 , 确定 系数 61, Co, oy 使 
læ 3 eai = Bh. (89) 
根据 我 们 在 前 面 关 于 Gram 行列 式 的 几何 性 质 的 讨论 可 
A, 4:5 ' 
v=xz— > Cil, (40) 
PiE jol Wih, TN v Rz Do E oe ZE S, 的 直 交 补 空间 St 上 
的 直 交 投影 ， 从而, 相应 的 向 量 
uM cili (41) 
Ea 在 子 空 间 S, 上 的 直 交 投影 ， 这 时 o 的 长 度 平方 为 
[o| =G la, %, a, Ti/G[as, =, a]. (42 
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XA 我 们 规定 lol 的 极 小 信 
{G [ai +, a, g]/G Ua, n, a? 
HAR TX 关于 向 量 系 Qi， Qs,…, @; 的 相对 相关 性 指标 ， 并 
记 之 为 


mr, "M — G [G4, tts Gr, a š . 
E[x|G =, aj | me m a aj | . 043) 


附注 “在 券 虑 向 量 系 的 线性 相关 性 度量 时 ， 应 先 把 有 关 
向 量 系 规范 化 ,这 里 的 向 量 wm， 其 长 度 应 假定 不 大 于 二 HD, 
[m «1, 

显然 可 知 , de | as, e, a] —0, WI Z Gs, n, s, 
xz, 在 古典 的 意义 下 为 线性 相关 . 并且 ,根据 Gram 行列 式 的 
性 质 可 知 


Ü«E(xia, e, aj«|e|]«i, (44) 
THRE FHEA z, ⁄<i<n, 有 
I E[a;|d, +, a,] <s, 
则 恒 有 | | 
(Gla, «=, a,]}? «e (45) 
这 就 是 说 , 若 向 量 系 |a, n, qs 中 有 一 个 向 量 @ 关于 它 
的 一 个 子 系 为 s- 线 性 相关 ， 则 该 向 量 系 就 总 体 来 说 ， 也 必 为 
e- 线 性 相关 . 
证 明 因为 
(G la,, =-, aJ}? 
< {Gfqs, --, ar, a] G [8,.5, ---, tii, "E a. 
{G [d., .... d;] Ha 
x {Q da, a)? — 
« E[d;|d;, ---, a] «e, 
从 市 定理 得 证 .证 毕 . 
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$3. 计算 相关 性 指标 的 方法 


TN 


Xe p e Ue e RU E E R 
的 应 用 之 本 ,我 们 先 来 介绍 几 种 计算 相关 性 指标 的 实用 方法 . 
从 表面 圭 看 ,要 计算 向 量 系 的 术 关 性 指标 , 得 计算 Gram 行列 
式 的 值 , 而 实际 上 则 并 不 需要 单独 进行 相关 性 指标 的 计算 .对 
于 一 些 计算 线性 问题 的 重要 算法 , 常常 在 算法 的 执行 过 程 中 ， 
自然 地 计算 出 来 , 从 而 对 算法 的 继续 进行 ,提供 有 益 的 信息 . 

3-2 QB 分 解法 | s 

对 于 给 定 的 mxn WB EE A, Dee em xm 阶 的 直 
"pk Q, ht 


QA =R, 
| B A=QR 0000 . (48) 
KER R E:— mox n Wr ENTE EE, iE EXT fv y 
Dii, Dez, ***s Pan (41) 


RAI (46) WER 4 的 QR 分解 . 它 的 具体 实现 , 我 们 将 在 
下 一 竟 中 介绍 . 对 和 矩阵 4 作 适 当 的 列 交换 , 可 以 使 
[9111 > | pea] 27727 | pos] . (48) 
zi rank(A) =n, 出 p, 0, EE P HERK 
2-[^ | (0.7 (49) 
f 0 | f 
ALENU BË, 是 一 个 nxn 阶 .上 三 角 阵 ,0 是 mm 一 四 xm Br 
 WyztABEe: 如 果 把 R, 左上 角 的 那个 x W E Mi 3A 
R, 小 如 ,由 于 | 
ATA, B? I, k=l, 2,5, m, A,— A, (50) 
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从 而 便 得 到 关系 
det (AZ 44) = det (Ri) det( B) 
= piip32* ** Dis, b=1, 2, +=, n, (51) 
据 此 便 可 以 得 到 向 量 a, CT 8) TR IR Xa, Ca, n, Or- 的 相对 
相关 性 指标 ; 
REla,|a,, ++, ay] = lox]. (52) 
应 当 指 出 ,我 们 在 定义 向 量 系 的 相关 性 指标 时 , 是 假定 向 
Ba, ea. 已 经 规范 化 ， 否 则 的 话 , 上 述 公式 应 修正 为 
E[a,|a:, +, & 3) = lexxl/ lea]. (53) 
此 外 ， 还 需要 指出 ， 为 使 序列 {| pu|} 不 增 , a, 应 为 向 量 
Ra, ---, G, 中 长 度 最 大 的 向 量 ， 对 规范 化 的 向 量 系 ,， | eal 
=1, 并 且 ， 因 为 在 直 交 变换 下 向 量 的 长 度 不 变 , 这 时 应 有 
Jon! =1, 
3-3 Gram-Schmidt 直 交 化 方法 
根据 向 量 ay ATHER d, d, 0, Gyi 相对 相关 性 指 
WKE, Elala, ++, 41.1] 实际 上 就 是 向 量 wi 在 Span 
las, …， d.) 的 直 交 补 空间 上 的 投影 向 量 的 长 度 ， 而 向 
d v. 可 以 表示 成 


D, —0, — 3 e Gi, k= 2, 6,0 V=, 


右 端 系数 C, 09, =, Ce-a 应 使 bx 和 €; +, ar- REX. 于 
Æ, HER Ui, Us, o, VL 必 是 一 个 直 交 系 , HH, (vl 就 是 
HE G, XTHER ai, o, Gy-: 的 相对 相关 性 指标 . Gram- 
Schmidt 直 交 化 方法 就 是 确定 直 交 系 V, …，t 的 一 种 方 
法 ， 其 步骤 如 下 : $ v=, b—2,3, n, O 的 表达 式 
可 以 改写 成 

Vy = G, — > pv. (54) 
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fE bi, Va, cn, 9y-1 依次 确定 以 后 , 为 确定 vu, 可 以 选取 系数 
Pi, Fs, 使 各 和 2 Va, os, Vw-1 都 直 交 就 行 了 , 这 
B], VURM Ga, as, 7-5, a, 也 都 直 交 ， 而 确定 系数 S 要 
比 确 定 前 面 的 v 的 表达 式 中 的 系数 6 简便 得 多 。 因 为 Us 
,Dx-+ 是 一 个 直 交 系 , 所 以 
B; (ax, 6) /(t,, v), i=1, 2, s, k—1, (88) 
不 难 证 明 , (p. €) = (o, a), Pr DJ B; 的 表达 式 也 可 以 写成 
fi (ar, V/V, 8), à—1, 2, 0, kei, (56) 
这 就 是 通常 所 讲 的 古典 的 Gram -Schmidt 直 交 化 方法 . 
在 六 十 年 代 , 发 现 了 这 种 直 交 化 方法 的 数值 稳定 性 不 好 ， 
面 它 的 一 种 变形 却 具有 较 好 的 数值 稳定 性 .我 们 称 这 种 方法 
为 改进 的 Gram-Schmidt 直 交 化 方法 ， 此 法 实现 的 步骤 如 
T. 
第 一 步 : 对 4—2, 3, +, n, 在 向 量 a, 和 a, 确定 的 平面 
E, 确定 向 量 qa 站 ,使 它们 和 aa TR BH 


NE €,) —0, $—2, 8, --, n, 


2, 3 


江 令 g 吕 = ol 为 具体 确定 aD 
di" = dy Td, (5T) 
于 是 , 据 (aD, ai) =0, 便 得 到 
7,7 (G,, a,)/(G,, @1), 4—2, 3, n, (58) 


在 这 一 步骤 的 最 后 , 就 得 到 了 向 量 系 
aP, aj, .. .. a2, 
后 面 ”一 工 个 向 量 都 和 第 一 个 向 量 直 交 。 

第 二 步 : W i=3, 4, e, n dg aP fa 规定 的 平面 上 ， 
确定 向 量 ef", rici af? 直 交 ,并 令 a? - ai^, af — ap, 
确定 a8? 的 方法 和 第 一 步 中 所 用 的 完全 一 样 . 

这 一 步 实现 以 后 ,就 得 到 了 向 量 系 
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as, d$, Us a. 
以 上 的 步骤 进行 m% 一 工 次 , 最 后 得 到 的 向 量 系 
ap, a2, ee, avv 
便 是 我 们 所 需要 的 直 交 系 Ui, Us, ns, Va, 
为 了 保证 序列 [os], los sms Dou] 为 单调 不 增 ， 在 第 
i 步 进行 相交 化 以 后 , 得 到 的 新 的 向 量 为 
a^, ais, o, aË, . 
选 上 列 向 量 中 的 长 度 最 大 者 移 到 ah 的 位 置 ， 并 记 之 为 
aP. KARRE pa。， 然 后 再 进行 第 d+-1 Jp. 
为 了 说 明 上 述 直 交 化 方法 的 数值 稳定 性 的 不 同 ， 今 举 一 


J. 

HB. A ; 
| 1 (d pi 
Mm a= 1 a= 1 

1" +e ë ` 1 F 
Li+ L Í ited 


其 中 , 0 le] «d, 便 得 在 计算 机 上 1+s DUE SÉGE, 而 数 
1--2e-4-6? 就 被 “ 舍 入 ”为 19e， 


系 是 
1 0 .0 
v= +e - —8 "n M 
1 "." e ^ 0 I 
2 jd 4d LQ - 8 
注意 济 向 量 p. fil ps 2 jap de f 0 RZN 
(0v) 1 


[vues] — 27 
所 以 6 一 60*, 从 而 可 以 看 出 向 量 vs 和 ws EORR ES 
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汶 一 方面 ， 用 改进 的 Gram-Schmidt ERN 法 得 到 的 


| 1 |. | 0 | ^ 0 ^ 
Ds | 21, 

-+E —8 i PE | 

v=] ) €s -| E ts | | 
| 1 8 | — 1, 
| 2 

Lid L0. _ 0. 


这 时 , (Us, Va) —0, GEAR, b. 和 ps 的 确 为 直 交 . 
这 而 种 直 交 化 方法 从 "理论 "上 讲 是 等 价 的 ,而 在 计算 机 
上 进行 计算 的 结果 却 可 以 有 很 大 差异 ， 这 是 由 于 两 种 算法 的 
计算 过 程 不 同 , 舍 入 误差 的 传播 也 不 同 , 这 是 算法 的 数值 稳 性 
程度 不 同 的 表现 ， 这 种 现象 , 衬 计算 数学 中 带 有 普遍 性 ， 它 告 
FRN, 殷 勿 把 数学 上 等 价 的 表达 式 随意 应 用 ! 
3-4 工 DLT 分 解法 | 
车 向 量 系 as, de, =, a, 为 线性 独立 ， 则 对 任何 加 1< 
bn, HB AT Ay 总 为 对 称 正定 , 从 而 存在 有 唯一 的 分 解 式 
ATA =L DIII ` 00 (59) 
其 中 的 BA bx b BY a s FZ BB, Didi 4 hx Ë 
E 51 fi B: | 
D, = diag(di, du, *' en, dy), 
d;70, £—1, 2, =, k, 
AR G9) IORHEPTUL EU RIED Cholesky AH 6 
有 有 效 的 算法 来 实现 这 种 分 解 . | | 
因为 矩阵 乘积 的 行列 式 等 于 各 内 子 乍 阵 行列 式 之 积 ， 于 
是 有 
GLA] =det( Lz) det (D,)-det( TZ) 
—det(D,) -dids--d,, b=1, 2, =, n 
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在 进行 矩阵 分 解 时 , 为 加 强 算法 的 数值 稳定 性 , 常 采用 选 主 元 
的 方法 , 这样 就 可 以 保证 序列 di, da, …, d, 为 单调 不 增 .与 
3-2 中 的 QR 分解 公式 相 比 较 , 可知 

LD LE = R! By, k=1, 2, -e,n 


有 从 而 可 知 
les] = Vd; , i=1, 2, =, Ë. (60) 
LEIA Y pg a, 关于 向 量 系 的 相对 相关 性 指标 : 
Ela,a, --, G4 3] = V du / N di, 
若 向量 系 da, ce, G, 已 规范 化 , 则 d, =1. 


$4 ERA EE RRE 


41 引言 

在 本 章 一 开始 我 们 就 谈 到 方 阵 的 奇异 性 问题 。 对 方 阵 求 
Ama, 奇异 性 意味 着 间断 性 .现在 我 们 把 奇异 性 概念 推广 
到 一 般 的 mx% 阶 矩阵 上 来 . 

定义 5 RAET mxn MER E 49535, W 
为 奇异 ， 若 4 为 满 秩 , 称 之 为 正则 . 

根据 第 3 章 的 讨论 ,我 们 已 经 知道 ,对 于 求 一 般 m xn Br 
E: A Bp XO At 来 说 ， 奇 异性 也 同样 意味 状 间 晰 性 ， 但 
基 和 方 阵 在 通 芝 意义 的 求 明 问题 而 言 却 有 根本 的 不 同 .其 

JE, FRERE 4 的 广义 首 AT 总 是 存在 的 而 且 是 唯一 的 ,其 

=> FRERE X W IARE LETER, 但 是 却 可 
以 用 保 秩 变形 的 方法 来 消除 这 种 间断 性 使 之 变 为 连续 .这 一 
点 十 分 重要 ， 它 为 使 用 广义 道 以 克服 在 通常 意义 下 求 遵 时 不 
可 克服 的 奇异 性 所 带 来 的 严重 困难 , 奠定 了 理论 基础 。 ER 
的 奇异 性 或 弓 秩 ,是 一 个 定性 的 概念 , 为 了 适应 数值 计算 的 需 
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要 ,有 必要 使 之 定量 化 . 目前, HUE Kl 43 R Hm 
奇异 欧 ”或 “几乎 奇异 的 ” 这 是 不 多 切 的 ， 从 理论 Eus cip 
MRSE CU, 是 矩阵 的 列 向 量 ( 对 于 和 xm V RE, 我 们 
Jua A ARRE AREE RERA, UD, REIT 
AEX RIERREN E t BRE AASE EHE 
ER. 为 此 目的 ,我 们 首先 给 出 以 下 的 定义 . 

定义 6 RPE mxn MERAS a, e a] ZJ 

量 的 顺序 ， 使 到 次 的 说 对 相关 己 指标 为 单调 不 增 设 exu 
定 的 一 个 正 的 小 数 , 沪 TAA CARERE 
E[G,.1]0,, -«, a;] «e, 

SU JUBOBEE 4 具有 n— k Ri e-S RE, 其 中 车 keni, 
这 时 和 矩阵 4 ROS 1 阶 的 e- 奇 异 度 . 

定义 了 车 

Afa, ed +, a,] Se, E[a,|a,, +, d,a] >e, 
RITARI OBERE 4 的 e-f 4. I 

在 这 里 我 们 顺便 指出 , 从 实际 计算 的 角度 来 讲 ,矩阵 的 真 
TA 往往 是 难以 确定 的 . 而 实际 上 , 在 许多 算法 中 , 我 们 并 不 
PRAE ER AR, 重要 的 是 , 为 使 算法 能 得 到 较 好 的 结果 , 应 

当 设 法 确定 它 的 某 一 个 etk, XF 8 的 选 定 是 极其 年 雪 的 . 

例如 , 车 计 算 有 关 Hilbert 矩阵 瓦 ,的 问题 , 在 ”比较 大 时 , 如 
时 把 它 作为 满 秩 来 处 理 ， 得 到 的 计 算 结 果 将 不 堪 设 想 ! 而 众 
所 周知 ,对 任何 ” H, 总 是 正定 的 ， 从 而 也 是 注 牧 的 . 一 般 说 
来 ,奇异 性 并 不 可 怕 , 困难 在 于 问题 的 病态 性 质 . 

4-29 $EREB] s- 秩 和 矩 路 的 拟 条 件数 

前 面 我 们 已 经 给 出 了 矩阵 的 条 件数 构 念 ， 并 证 明 矩 阵 的 
洪 条 件数 可 以 天 示 成 该 年 阵 的 最 大 和 最 小 正 奇异 信之 比 ， fa 
JE TPP EE ARE RER KATER, 而 且 , 一 般 说 来 ,这 
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种 估计 往往 偏 于 保守 ， 这 里 我 们 将 对 于 和 矩阵 的 条 件数 给 出 一 
种 简便 匈 行 的 信 计 方法 ， 为 了 这 一 月 的 , RPAH 
的 条 件数 和 站 关注 指 人 之 间 的 关系 . 
BEBE A= G, Qa e, Qu] 已 经 规范 化 ,并 和 假定 语 询 困 
量 的 顺序 可 以 保 汪 各 次 的 相对 相关 性 指标 为 音调 不 增 ， 我 们 
先 设 rank(: 4) =m, X] A EQ R 分 解 得 
A-QR (61) 
Hopp Q JE— 4 mx» MIERE, R Ae- bf, E 
AAF02628 gu, pen c. Pr 并 且 
i= | len| > ja > C> gal. (62) 
Ji DEEE R F AGES S 23 5 dB. EZAM Ae ur 
SHRZE BEN A M An AA RIR ATA, 所 以 4 和 于 有 共同 
的 奇异 值 . 2k, Ep EE dnm bas, 并且 
e; R7 Re, = pj, e, RR e, Pin, 
很 据 特征 值 的 极 性 可 知 
A> | cal, AV Hess] . (63) 


-> iu == - Hæj, e.. 8,3]: t. (64) 


f Ios. 
因此 ， M 
E [a,n], 1 d, i] DEZ = Pm <s 
ipi] , 
则 EOD. 


这 就 是 说 , lens fU RR PER bCA) WEB. 另 一 方 面 ， 
> M —U( ATA) Y [a.i «m, . 
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FETAU n. RREH, BARREA cR ERN 
Y n. Í Tn, ENG AERA DUE, 条 件数 (A) 的 大 小 主要 天 
4 A SE G GS 则 pr 和 An ADR URS AAEE 4 为 
SB. H 于 rn 4 fW An ESI ETE m3 的 连续 


i^ MS oa Hy LATE. Tu Fp pis za 
IARI a, rn, Æa HEZA A 
AT 4 = disg loi, ee, Dn) 
Ast | f S7 


x 


° Aa == loni. 
Bas. Ln | An, 它 仅 为 和 的 二 种 近 ira. 从 实际 的 
计算 结果 可 以 看 出 ,和 您 小 ;| pm| ARAH An 近似. 
EX8 没有 一 [ai 1; an] 为 秩 是 £ fJ mes Bi An, 
在 本 节 的 假设 下 , 今 规定 —— D uu E ~ 
opo AE Talas ee, Valb "1 (65) 


pps 
TREAS SEAE k. BOv 8 BJ SE BE W Sí 
的 .但 是 ,在 许多 实际 计算 问题 中 ,所 遇 到 的 矩阵 4 常常 是 注 秩 
的 (有 时 甚至 在 理论 上 就 可 以 证 明和 矩阵 是 潢 牧 的 ; 如 Hilbert 
AIO WAR T SHE EE, 不 仅 得 不 到 好 的 计算 结果 ， 
其 至 会 全托 法 不 能 进行 下 去 .这 有 时 ,一 秋 管 用 的 方法 , ORDER 
a "4E T Ak (pseudo rank) 3x 4- RES. BUR RM, BI 
iO Bw Mei tE En R (Ue Eik). pula q gen: 
这 个 丹 您 , 其 目的 也 就 在 于 此 ， 现 在 我 f ma 设 对 于 选 定 
gie. DAMER AR s- 著 为， 并 对 这 和 带 稍 形 来 考虑 加 
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BERIE. XPT EB: 4 的 假设 仍 和 前 面 一 样 , 并 对 A TE QU 
分 解 ; 
A=QU, (66) 

这 时 ,@ 为 一 个 mxn MIELE, U Æe xn 阶 上 梯 
EER, 其 具体 形式 如 下 ; 

v-| R U, | (61) 

0 D 
其 中 的 R — 4 hx k 阶 的 非 奇异 上 三 角 阵 ， 它 的 主 对 角 元 
jonl, lesl, ^, lov] 系 单 调 不 增 ， 它 们 就 是 相应 的 相对 相 
关 性 指标 (注意 ,对 规范 化 的 矩阵 ，| pii| —1). 
定义 9 我 们 规定 


{Blay |a, MP Ci 让) 一 T (68) 


为 确定 矩阵 4 的 s- 秩 为 上 时 的 拟 条 件数 ， 并 记 之 为 belda). 
为 使 读者 对 这 样 定义 的 拟 条 件数 的 意义 有 进一步 的 了 

解 , 今 讨论 于 下 .这 时 ,矩阵 4 的 分 解 式 (66) 可 以 表示 成 

A-—QU — 4,--804,, (69) 


4-47 Ui] daima 。 9 | (70) 
0 0 | 0 U, 


显然 矩阵 A, 的 秩 为 ,而 矩阵 和 4 的 真 秩 则 可 能 大 于 % 甚至 为 
满 秩 ， 因 为 rank(41) 一 %， 所 以 A 的 后 n 一 个 奇异 值 均 为 
F. WOBERA 的 后 -个 奇异 值 为 
Ay un Ans 

则 根据 奇异 值 摄 动 定理 有 

aS 1841] = [Us], j=k+3, +<, n, (71) 
因为 矩阵 4 的 e- 秩 为 *, 所 以 有 

E[a;j|a;, =, d] <e, j- bl, ee, n, 


其 中 ， 
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从 而 可 知 


[Us] <V nk s, (72) 
于 是 便 得 到 了 
定理 6 BER 4 的 fA k MEERA 
Ac mn-ks, j=ktl, n. (73) 


这 就 说 明 , 车 相对 相关 性 指标 loreal 很 小 的 时 候 ， 算 
EAH n-k 个 小 奇异 值 ， 就 极限 情形 来 说 ， 当 oval 
->0 时 , 矩阵 4 有 2 一 下 个 奇异 值 M, =k, +, m, 

在 实际 计算 时 ， 为 了 控制 矩阵 4 病态 的 危害 程度 ， 常 根 
据 适 当选 到 的 正 数 e 来 确定 4 的 一 个 降 秩 近似 , 如 前 面 年 阵 
和 41， 在 算法 中 采取 了 这 种 措施 ， 就 可 以 避免 食 入 误差 影响 的 
恶化 , 从 而 提高 算法 的 数值 稳定 性 。 
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广义 适 矩 阵 和 线性 最 小 
二 羔 问 题 的 计算 方法 


S iy UA KERER EA R 


i AEA mxn REE, ERJETPAMGRBS, 我 们 总 E 
AE m | W V BE AT: c diee Dana mon pe 
Af guo BEA 07 i : D. . uA 

A= BO, s 07 52s, G 

JUPE) EI C 433g m x r rS VER Tex a Er 47 us S8 

FE, iti r- rank (A), 这 时 4 BU UR PE AT EAERI 

A*—G*B*. (2) 

Ay Bd C RIEMER PE, BEELETIIMI 3308 5* qm O+ 

EA A, 

t= ( B” B) BU, Ot =01 (007) (3) 

Nnm B78 moo WEAR 阶 对 称 正 正定 方 阵 于 是 广义 道 
5B E AT j fe np D ASK ER 

A* - CO (OCT) (BTB) IBT, (4 


XB E x ii SIE A EEEH 


Am -—b US) 
[repens “= ERR m 就 可 以 时 公式 
= Átb= 0T (CO) (BT 1 Brb o3) 


KAn MUER AWANE, D rank(4) =n, RE S 
(O Ho SHE Js 
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A*— (AT A) 1 AT, «p 
WES EURUZ RA m 的 表达 式 (6) 就 化 为 
e= (AA 1 ATD, (8) 
ANH At 的 公式 (O 以 及 计算 极 小 最 小 二 乘 解 的 公 
式 (6) (Td Rl Bejta, e COCHE E, e cid 
时 还 可 以 大 为 简化 ， 例 如 , 令 2= pb, 人 解 方程 ， 
| (BTB) (CO v= s - (9) 
求 出 e, TERA p= Oo, MEWS oM, KERK 
REAMERUTY RERA ARAE ° nn. 

本 章 将 介绍 几 种 常用 的 关于 短 阵 4 IUE A CIR OE 
利用 这 紫 方 法 玉 计 算 广 义 逆 第 阵 47 122 TREE ER HE 77 
程 组 的 级 小 最 小 二 乘 解 z. 

和 一 般 前 计算 问题 一 樟 , 在 考虑 计算 方法 时 , 永 当 考虑 下 
列 三 个 方面 的 问题 ， 
200) 计算 工作 量 的 大 小 问题 ; B 

(1) FED AAE RKE 

GE) SEU CRURA 
在 本 童 中 我 们 介 rper, o appo 


piagge H 
tI nn 


oS vs 82 Gauss 3d uA. 


9-1 Gauss iki pue oun ord 

Gauss 消去 法 实际 上 就 是 甜 阵 的 LU 分 解法 ， fx Be den 
知 的 解 线性 方程 组 的 -种 常用 的 方法 ， 这 神 方 法 也 可 以 用 来 
IERA 作 满 牧 分 解 , 它 具 有 计算 量 小 的 优点 , 为 了 说 明 这 
个 方法 的 基本 思想 和 步 又 ， RNI AHER mxn 
元 素 au 表示 成 通常 的 形式 
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Qi Ci rt a. 7 


d= Qoa Gos *** Ap (10) 


**29067epsvenen 


并 假定 rank CA) 7, 

iE k HI — RURSHICE CAR E Ik Ux 7c 3 SE Fk 
A, 逐步 使 矩阵 A 中 位 于 主 对 角 元 下 方 的 元 素 都 化 为 零 ， 为 
了 使 算法 不 遭 到 不 应 有 的 终 断 并 且 加 强 算法 的 数值 稳定 性 ， 
需要 采用 选 主 元 的 措施 . 每 一 列 消 元 为 算法 的 一 个 “大 步 ” ER 
为 矩阵 4 的 秩 为 7, 所 以 经 过 7 个 “大 步 ” 消 元 , 矩阵 4 就 化 
为 一 个 上 梯形 阵 


U 是 一 个 "xn 阶 上 梯形 阵 ,其 下 方 的 元 素 都 是 零 . 

消 元 的 步骤 如 下 ， 

L REN 为 了 提高 算法 的 数值 稳定 性 , 以 就 总 体 选 主 
元 为 宜 。 这 就 是 说 , 在 执行 第 -一 大 步 的 开始 , 先 从 矩阵 A 的 
全 体 元 素 中 选取 绝对 值 最 大 的 元 素 , 设 其 为 wwe 车 存在 有 几 
个 这 样 的 元 素 , 可 取 进 行 元 素 比 较 时 第 一 次 发 现 的 那 一 个 , 并 
把 它 经 过 行 、 列 交换 移 到 4 的 左上 角 的 位 置 作为 第 一 大 步 的 
主 元 , 这 相当 于 对 怎 阵 4 分 别 左 乘 -- 个 排列 阵 以 使 4 的 二 p 
两 行 交 换 , 再 右 乘 一 排列 阵 , 以 使 新 抢 阵 的 二 9 两 列 交换 . 记 
最 后 所 得 矩阵 为 AO = [ad], 


O mmo: 
2 Woo 记  ， 
Ld 4-2 9 ...... 
i1 adt: =, Cy , m, 


RRRA 的 第 -- 行 并 把 所 得 结果 从 第 5 行 中 减 去 ， 于 是 ， 
和 矩阵 AS 中 第 一 列 主 对 角 元 以 下 的 元 素 便 都 化 为 零 , 这 一 
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大 步 的 全 过 程 ,相当 于 用 矩阵 


r 1 1 
I 1 0 | 
Pi=| 一 li "4 (11) 
So. | 
ME Md 
L -Lua TEE 1^ 
EREE AS 结果 为 
— Xens X4 
1 
| 0 A vs e... x | 
P.A -| 0 Yer x j, 2) 
| st | 
e Xe x- 


在 进行 第 二 大 步 的 开始 , 先 从 矩阵 012) 中 位 于 第 一 行 之 
下 而 位 于 第 一 列 之 有 的 那个 (m1) x (a— 1) Wr JE Ie sh, 
选取 绝对 值 最 大 的 元 素 把 它 移 到 (2, 2) 的 位 置 ,作为 主 元 . 
O2 右 方 的 矩阵 在 根据 选 主 元 的 要 求 交换 行列 后 ， 所 得 年 阵 


为 a? [ap], 4 


(2) ao 
[E ab 7 $73, 4, s.e, M, (18) 
1 
lo 1 0 
0 一 1 i 
Feb. 0. 7. x (14) 
| i 0 ". | 
0 lna 1! 


并 几 它 左 习 4。 这 就 完成 了 第 二 大 步 . 
如 此 进行 下 去 , 因为 ABERAT vn, ER 了 Fi; 不 会 改变 它 的 
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E, 在 进行 了 7 个 大 步 以 后 ， 原 矩阵 4 就 化 为 一 个 上 梯形 阵 
d. 整个 过 程 ,包括 选 主 元 条 消 元 , nj AERA 


FOE, SP P AP, =] M: (15) 


其 中 的 P. 了 ;为 两 个 后 列 阵 ， s, Fo, rn F, PUMA 

时 有 所用 的 五 阵 (有 时 称 之 为 Prbonius IE UD. 是 一 个 

rxn EREE. Xv4F ATE AREKEA 阵 ， 
它 的 基体 形式 为 


i 
| 一 Vol 1« 0 | 
La -az 1 | 
a sas... Fue | : | e e ; | (16) 
I ! : - n LI . *. 
| Taia erret les 1 
DoD 0 - 
上 9 


^" By "UT AZ 


1 v; 
| I 
PE 
(E, sP)" 2 v - AGR QD 
| Lesley 1 | 
DL 。 Ll 0-01 
T ARS 45335 J DI AE EA T 
PAP, Lf U | (18) 
0 J 


考虑 到 (18) ARU 下 方 的 矩阵 是 (m — p) x MEE, YE 


运算 时 ， BEER L, 的 后 这 -7 列 实 际 上 不 起 作用 ， 记 其 前 ?了 列 
7g L, Wl (18) 可 以 表示 成 
P,AP.— LU, (19) 

LEH b i-e m x r 阶 的 单位 下 梯形 阵 , 是 一 个 ?Xn 
Wr E BOE ES, 它们 的 秩 都 是 7. 所 以 在 消 元 最 后 ,我 们 便 得 
ITEE P. AP. 的 满 秩 分 解 ， 

最 后 我 们 指出 ， OBOE. TIERE 
时 ,应 注意 以 下 两 点 ， 

(D. ERNARI, DR A b AMM Rb 
的 相应 分 量 也 必须 同时 交换 , 而 的 分 量 保 持原 来 的 次 序 : 

(2) 碳 乘 排列 阵 进行 列 交换 时 ，2w 的 相应 分 量 应 同时 进 
行 交换 ,而 右 端 向 量 5 的 分 量 次 序 不 变 ,， Co Pen 

2-2 Gauss 消去 法 的 实现 š 

1° EBE L MU 的 元 素 计 算 公式 . ` UR E BET 
IJZER 阵 元 素 下 标 所 带 来 的 影响 REI L “和 U HIRAET 
依次 按 下 列 公式 计算 ， | 


Fb», 9=1, 2, eere ,个 依次 计算 
Wpj— Gy; 一 Pues kis j= 2, fui, - tesi, Ns (20) 
` dam (taS lata) /we Pm qd, m, m; QD) 


… 为 了 提高 算法 的 数值 稳定 性 ， 在 计算 内 积累 加 时 应 采用 

双 精 度 运 算 ， 2E 
2° XCTABFEU LL AGENTE. CBS uy MM 

次 计算 出 来 以 后 ,随即 把 它们 存放 到 元 素 au; 和 ais 的 位 

这 就 是 说 ， TE FOR E BORPE < 4 的 元 素 的 单元 ， NS U » 

LUUD, 
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(22) 


la beer Men 
3” 垂 阵 仿 秩 的 确定 ， — BEA 的 秩 实际 上 事先 并 不 知 
道 ,我 们 只 能 在 计算 过 程 中 确定 它 的 一 个 适当 的 伪 秩 , 其 法 如 
" 
Apud 0, (HEIE PL PJ 8 XJ 88 BE SEC — 
35), 如 果 在 第 "i 大 步 所 选 主 元 的 绝对 值 小 于 时 , 就 确定 
T HRR A 的 s- 秩 . | 
4 ”计算 极 小 最 小 二 乘 解 时 加 强 算法 数值 稳定 性 的 让 法 . 
根据 前 述 矩阵 的 满 秩 LU 分 解 (19), 计算 方程 Amb. 
BJ IN 388 w 的 基本 公式 为 ， 
z-U'(UU") (TEL Ib 


=U L LUUT) -Lb. (23) 
为 了 改善 算法 的 数值 稳定 性 , 可 令 MEE 
U- DÛ, (245 

Xp D 351 a B 
- D —diag(wa, e+, ns), (25) 


m O 是 一 个 rxn 阶 单位 上 梯形 阵 ， 它 的 元 素 ts 的 绝对 值 
不 大 于 1 
DP x1, (26) 
这 有 有 利于 控制 舍 入 误差 的 传播 ， 实 际 上 我 们 使 用 的 不 是 LU 
分 解 ,而 是 4 的 LDf 分 解 。 这 时 , 公式 (23) 就 化 为 
z=D"(I LDOO) ITb, (27) 
5° EEA 为 列 满 秩 的 情形 . 
这 时 , 因为 rank(4) =n, (23) 中 的 口 为 nxn 阶 非 奇 异 
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Ar EE, 故 有 
Uz (UU?) -1 -U-*, 
从 而 (23) 就 简化 为 
æ =U (LEL) HED, (28) 
这 个 计算 公式 具有 较 好 的 数值 稳定 性 ， 因 为 选 主 元 常 使 
L BS, 从 而 矩阵 4 的 病态 性 质 决定 于 矩阵 本。 原来 矩阵 
UU" 求 逆 的 条 件数 为 
&(UU?) — (U), (29) 
FB BEER U Wk, PAHE (28) 便 具 有 较 好 的 
条 件 ， 
23 运算 量 和 误差 分 析 
如 果 把 一 次 加 法 和 一 次 乘法 合 在 一 起 算 作 一 次 运算 ， 并 
Hom, n, 221, MAER A 进行 LU 分 解 所 需要 的 总 运算 次 
数 的 阶 为 
r| mn x (m--n)r +3] |. (30) 
利用 Wilkinson 问 后 误差 分 析 的 方法 可 以 证 明 ， 用 
Gauss 消去 法 所 得 到 的 LU 分 解 ， 是 某 一 Ti) EE A+A 的 
精确 分 解 | . 
LU — A--8A, (30 
.如 果 使 用 按 列 选 主 元 的 方法 , 则 对 54 可 得 出 下 列 估计 : 
| Šq = 0, j—1, 2, =, m, D. 
[õa] < [leln, j= 1, i099 jl, m, 
[824] < lusin, i= 2,- "0470, Und 
[day] <e, im r1, s m jart, ee 
其 中 的 > 表示 计算 机 的 精度 , I 
: 在 这 里 我 们 不 对 误差 分 析 作 具体 推导 ， 而 只 列 出 结果 , 因 
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nao. 


为 我 们 的 目的 仅 在 于 对 本 章 所 介绍 的 某 些 算 法 作对 比 ， 对 误 
差分 析 有 兴趣 的 读 考 林 参阅 Wilkinson 的 专著 或 本 章 所 列 
出 的 有 关 文 献 ， 


$3 QR 或 QU 分 解法 


3-1 Householder 变换 
为 了 建立 算法 的 需要 ， 我 们 先 来 介绍 一 种 结构 简单 的 对 
称 直 交 变 换 ， 设 丝 为 多 ”中 前 一 个 长 度 为 工 的 向 量 . 令 
H-I-c-g87uwu, (88) 
矩阵 H 显然 有 对 称 性 ， 欲 其 为 一 直 交 阵 , 必须 且 只 须 
HH*=(I+8 tuu") (I+ 87?u8u)'—I, 
据 此 可 推 得 
g3--2, 
RA (33) 中 便 得 到 对 称 直 交 阵 
H —I-2uu., (34) 
直 交 阵 (94) 便 是 著名 的 Householder 4 pF, 
现在 我 们 来 进一步 考虑 , 对 给 定 的 长 度 相等 的 两 个 m HE 
向 量 z #I g, HJ Y63515 E u E Br 48 B Householder 矩阵 
H RAHE: 
Hæ=y, (35) 
把 (84) 中 的 H EKARA (85) 中, 便 得 到 关系 
2(007w)U oc — $3. 
这 就 是 说 , FIRE SHE e — Ef. BUPOH 表达 式 中 的 
u 为 单位 长 ,所 以 可 令 | 
x=— 
"7 Tur 


(36) 


这 里 应 假定 xy, 于 是 便 得 到 了 我 们 所 需要 的 H B. 


ar.» (£-y)(x—-yY 
H-I 2 一 Two . (91) 


现在 我 们 来 确定 向 景 4 WER H RAER: 
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Tp-i 


—oÉp 
Hæ-=-| UU |-y, eii. (38) 
Timi 
0 
O 4 
因为 向 量 z gr 的 长 度 相等 ,首先 可 知 
ë= (at Siepe, 
这 里 的 p 和 1 是 事先 给 定 的 非 负 整数 . KREN, E H l: 


x 的 后 m 一 I- 个 分 量化 为 零 , 保持 前 面 的 分 量 除 第 jp 个 外 
BTE. TE, g 的 第 Pp 个 分 量 


—oé,, 
仅 绝对 值 被 固定 ,符号 可 根据 需要 来 选择 ， 为 了 使 计算 ww 时 
避免 减法 以 改善 稳定 性 , 可 令 
_ Ti, 车 z,2>0, 
775-3, 3 2,«0. 
关于 向 量 u WAE Wa, tns 5 Um, 可 计算 如 下 ; 
一 153 一 


(89) 


m i m o : 
s= —o0(zi4 Dri)”, 
i= 


令 
| u-0, i=], ee ,p-1, 
` U = 5 — 8, | (40) 
u =0, 4=p+1, en ;一 二 
um, i=l, ec , m, 
令 B = Sus, (41) 
二 后 便 得 到 所 需要 的 H 阵 


H-I-g8^uut, 3; 85-0, 
H-I, i 8=0. 
8-9 和 矩阵 的 QR 和 QU 分 解 
有 了 Householder 矩阵， 我 们 就 可 以 对 么 xm proa pe 4 
= [e «5, a.) 进行 满 秩 分 解 。 和 Gauss 消去 法 相 类 似 , 若 
rank(A) — r«n, 我 们 也 分 7 步 来 进行 . 
第 一 步 , 确定 H 阵 Hx, BD, 确定 单位 问 量 s, 它 所 构造 
的 Householder 矩阵 Ha, 使 
H a,= —o |a je, 
其 中 的 e, 是 m 维 空间 的 第 一 个 单位 坐标 向 量 , onm +1,35 G. 
的 第 一 个 分 量 非 负 , 取 o= 十 1, 否则 , ko= t, # (49) 
中 分 别 令 p=1, 1 一 2, ERKE m 
s= — cd], 
U47 043 —8, 704, $—2, n m 
| Bos, ZI f 
然后 按 (42) 即 可 算出 五 1, 以 其 左 乘 矩阵 4 得 
6n Hi A= [Hia --- , Hia = AO (UE) 
从 而 就 完成 了 第 一 步 消 元 ， f 
第 二 步 : 把 矩阵 AQ 右 下 角 那 个 Cm— 1) x (0-1) Ër + 


一 {sán 


(42) 


和 矩阵 记 作 AO, 
GD) 一 [â "e ; &,], 
它 是 一 个 (m—1)x (a—1) 阶 和 矩阵 ， 用 和 第 一 步 完全 相似 的 
方法 确定 (m—1) x (m—1) R H pk Âa, 使 他 .Ga 的 分 量 
除 第 一 个 外 都 是 零 ， 令 
1 0 . 
H|, "n 
计算 HAY, 3g KERN AO. 这 样 就 完成 了 第 二 步 . 在 
第 二 步 消 元 时 , 矩阵 AC! 的 第 一 行 和 第 一 列 都 不 发 生变 化 ， 
记 AC 右 下 角 那 个 (m —2) x (—2) WEERA ÂP, 
并 仿 前 进行 第 三 步 . 
这 样 继续 进行 下 去 , 到 第 ” 步 完 成 ,矩阵 4 就 化 为 一 
上 梯形 阵 | 


HH, s H, A= | M: | (48) 


其 中 的 是 一 个 +xn 阶 寺 梯形 阵 ， 由 于 直 交 阵 的 乘积 仍 为 
直 交 阵 , WH, Hy, WEEE EE, T JE SE EE A 
便 可 以 表示 成 | 
U 
4-Q| |]. 


ETERU FI m —r 行 全 是 等 元 素 , 所 以 在 运算 时 Q 的 后 
mr 列 实际 上 不 起 作用 、 记 人 的 前 * 列 为 9 MERT A 
示 成 。 


其 中 , Q, mU KHARE r, “Dip, 我 们 用 Householder 
ARER T BEATAE. 


MRRP 4 为 列 满 秩 , BI, rank(A)=n, WV EBHEREU 
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这 时 就 变 成 一 个 wx% 阶 上 三 角 阵 R, 而 (44) EL : 
CO A=QR, C (45) 
CIONES H 变换 请 元 时 ， 第 一 步 作用 于 mox Br bB BE A, 
HOPET (m1) x (n—1) 阶 和 矩阵 人 0， 等 等 ,被 作用 的 
矩阵 , 阶 数 越 来 越 小 , 这 就 是 说 , 消 元 的 计算 量 逐 步 下 降 .，， 
关于 H 阵 的 存放 ， 各 次 消 元 所 用 的 H 阵 是 分 别 由 m 维 
向 量 t, m —1 维 向 量 Uo, es ,m-—r-1lp] tz, Bre E 
的 , 因此 ,. 只 要 把 生成 H 阵 的 这 些 向 量 存放 起 来 就 行 了 ， 在 
消 元 过 程 中 , 存放 矩阵 4 下 方 元 素 的 单元 , 分 批 为 零 所 取代 ， 
因此 , 可 用 它们 所 占 单元 来 存放 诸 u, 的 分 量 . 这 时 唯一 的 困 
难 是 主 对 角 上 的 元 素 非 零 ,为 了 便于 应 用 , 可 把 它们 存放 到 另 
外 的 单元 , 让 出 地 方 来 存放 各 次 向 量 的 第 一 个 分 量 ，. 
选 主 元 ”为 了 提高 算法 的 数值 稳定 性 , 在 利用 H 变换 进 
行 满 秩 分 解 时 ，, 选 主 元 的 措施 也 是 十 分 重要 的 ， 选 主 元 的 具 
Bord. | 
在 进行 第 一 步 以 前 , 先 比 较 Jai, $—1, y m 的 大 小 , 
取 其 中 第 一 个 最 大 者 作为 4 的 第 一 个 列 向 量 , 必要 时 应 对 矩 
阵 4 作 适 当 的 列 交 换 ， 完 成 以 后 再 进行 第 一 步 消 元 . 
在 第 二 步 开 始 前 , 比较 矩阵 AO — [G,, e, d, 中 m 一 
1 个 m-i 维 列 向 量 的 大 小 ， 选 长 度 最 大 者 作为 AO 的 第 一 
列 , 需要 作 列 交换 时 应 对 矩阵 AC 进行 。， 完 成 以 后 再 进行 第 
二 步 。， 如 此 继续 下 去 ， 这 样 就 可 以 保证 最 后 所 得 上 梯形 矩阵 
U 中 的 各 主 对 角 元 , 其 绝对 值 不 增 , 并 且 在 每 一 次 消 元 后 , 相 
应 主 对 角 元 都 具有 最 大 的 绝对 值 , 
公式 (44) 和 (45) ERER A 的 QU 分 解 和 QR 分 解 ， 
它们 分 别 相 应 于 4 为 亏 秩 和 ( 列 ) 潢 秩 的 情形 .完成 这 种 分 
3,25 r2p1 Bl, 所 需 总 运算 量 的 阶 为 ， 
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Gho opmand DLL 


它 是 Gatiss 消去 法 完成 LU 分 解 所 需 运 算 量 的 两 售 , 但 是 ， 3 
完成 广义 逆 矩 阵 .4+ 的 计算 而 进行 下 一 阶段 工 作 时 , QU A 
解 者 得 到 了 补偿 ， 例 如 ， 利用 Gauss M ds REOR JR AERE A 的 
LDU 分 解 计算 AT 尚 需 的 运算 次 数 约 为 


T [2mn- + mw +z], ` 


而 用 QU 分 解 去 完成 At 的 计算 则 只 需 约 


4 
r[2mn — ios —nhpd- * r°] 


3-3 极 小 最 小 二 乘 解 的 计算 和 QR-LLT 分 解 
在 完成 趾 阵 . 冯 的 QU 分 解 后 , 线性 方程 组 
Am-b ` 
的 极 小 最 小 二 乘 解 就 可 以 表示 上 成 . 
æ —U* (UU?) QTD, (46) 

右 端 中 的 Qib 是 一 个 ~ 维 向 量 , 它 的 计算 不 需要 先 形 成 豆 恋 
换 的 乘积 以 得 到 Q, 后 再 进行 ， 在 对 和 矩阵 进行 分 解 的 过 程 中 ， 
随即 依次 用 H 变换 Hu Hs, nne , H, 左 乘 向 量 b, 最 后 取 
其 前 ?个 分 量 构 成 7 维 向 量 Q7b. TER b. FÆ, (46) 就 
变 成 


€ -U'(UU?^)^L,, (4T) 
在 计算 极 小 最 小 二 乘 解 2 时 , 2E S ER EAE EE (UUT) ? G 
计算 出 来 , 可 按 下 列 方式 进行 : 令 
(UU) b, — v, 
Ju 
(UU Vb,. (48) 


因为 UV” 为 一 个 xy 阶 对 称 正定 矩阵 , 所以 可 用 Cholesky 
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分 解法 来 计算 向 量 o, 代入 UID CRRLABSSIET PERSE B >, 
3b =n, MERE 4 为 列 满 秩 , 3X RI U = R 是 一 个 非 奇 异 
的 上 三 角 阵 , 于是，(47) 就 化 为 
æ= RT( RR?) b, = RT ( RP) Rb, ; 
= R`3p,, (49) 
Ræ= b, (50) 
只 需 利 用 回 代 就 可 以 把 解 ae 计算 出 来 . 
QR-LLT 分 解法 ， 在 一 般 情形 ,和气 阵 A WR r 常 和 mn 很 
接近 , BH 


或 


. ñ — = q 
是 一 个 小 的 自然 数 ， 对 于 这 种 情形 , 应 用 以 下 的 方法 比较 理 
JEJERE A 的 QU 分 解 中 的 "xm Er EB EE U 表示 成 
U-[&R:U], (51) 
这 里 的 外 是 一 个 非 奇 异 的 ?Xr 阶 上 三 角 阵 , URA—-mB 
rX(n-q) BEBE. SEI EE r 分 成 了 维和 一 COEBER WAR, 
i Z 2g æ 和 2, 


£i i 
s- [21 | m 
BJ U-LRU) ER (47) 的 两 端 , 便 得 到 方程 
fix. Do 一 (88) 
KEA n RARR r ARETE, JK (69) 解 出 x 


Xi =R (b, — Uu), (54) 
然后 再 确定 wa 使 
æj = [2 + ae, |? 
—[E7(5, Da.) Y LE 3 (b, Üx] ela, 一 极 小 ， 
令 grad(io|*) —0, 便 得 到 方程 


— 158 — 


(0RR GU 4-1, s OC" CRIT) "b, 
opi, Inr (og) x (nv) Bp DEBE, 3k ya — TRECE 
(RORO) --L, e (RU) Rb, (55) 

fe = ROU, 方程 (55) 就 简化 为 


(Tort VV ra V? R^, (56) 
AE V dk nx (nsr) 阶 ,根据 方程 
Ry =Ü (BT) 


依次 进行 2 一 人 次回 代 就 可 以 把 它 计 算出 来 ， 
方程 (56) 的 系数 答 阵 Int VV EA arxa 
7) 阶 对 称 正定 方 阵 而”-? 又 很 小 很 容易 作出 它 的 
Cholesky 4f. 
Int VV = LD, (88) 
工 是 一 个 (n 一 7) x (n7) Br F = ER. 
4 有 B76. 一 y, WJ 


Ry=b,, 
经 回 代 即 可 算出 向 量 2V。 然后 再 解 一 个 小 方程 f 
LLZae,= V Tu, (59) 
最 后 便 得 到 了 所 需要 的 极 小 景 小 二 乘 解 
g-Vas 
一 y 
a | M ]. (60) 


生成 方程 (59) ,总 共 约 需 
n 一 次 开 方 ， y O 一 人 全 次 乘法 
运算 量 不 大 ,所 以 当 % 一 > 很 小 时 是 十 分 方便 的 . 
3-4 QU 分 解 的 误差 分 析 和 确定 伪 秩 的 准则 
在 前 面 记 讲 的 算法 中 涉及 到 秆 阵 4 的 秩 , 这 是 事先 并 不 
知道 的 , 应 在 算法 执行 过 程 中 确定 一 个 理想 的 伪 秩 ， 在 第 4 
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章 中 我 们 对 确定 伪 秩 提出 了 一 个 准则 ， 根 据 有 关 的 相关 性 指 
标的 变化 情况 来 确定 伪 秩 的 大 小 ， 本 节 将 介绍 Deuflhard 和 
Sautter 提出 的 一 种 误差 分 析 方 法 , 并 据 此 阅 明 前 述 准则 的 合 
理性 . 

WARE A y AY, H, 3; 85 k vx BJ Householder zi: 
换 , 则 有 

A- AO, AO — H,AG-D, pai, «ue ,n, 
bo =b, bP — Hbd, k=1, *+.... ; Tw. 

这 里 暂 假定 4 为 满 秩 . bk H 变换 的 结果 , jn 4B BE AO 化 
为 以 下 的 形式 . 


A9 = HH HA =[ 


相应 的 右 端 向 量 为 : 


(61) 


R, U, 
Ñ "n (62) 
b = [er dipl. (63) 

为 了 记号 简单 , 我 们 假定 矩阵 4 中 各 列 的 次 序 已 符合 选 
主 元 的 要 求 , 不 需要 右 滋 以 排列 阵 作 列 交换 ， 于 是 ,上 三 角 阵 
R, 中 的 主 对 角 元 loul, 为 一 不 增 序列 . 

loul] > [pool > zip, 

同时 有 les! z- losl, W 73, 

为 了 进行 误差 分 析 的 需要 ， 今 规定 一 种 特殊 的 矩阵 范 数 
WTF: 


14Alo=maxlal, A= [a;, ee €. (64) 
根据 这 个 定义 ,分 解 式 (62) 中 有 关 和 矩阵 的 Ilo WTF: 
14lo= lpnl, 


[Dalos Halo lon}, 
| W, lu- IPs aal , 
IWaalosm Wilo, 
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k=l, ee nai, (65) 


而 (68) rB ËJ IJ X d, 满足 关系 dial «dil, £1, +=, 
n-i, : 
FERE 4 A, DEAE E MA p<n, 有 
W,=0. 

在 矩阵 分 解 进 行 的 过 程 中 , 由 于 舍 入 误差 的 影响 , 每 一 次 
所 作 H 变换 的 结果 , 都 带 有 一 定 的 摄 动 ， 首 先 ,矩阵 4 记 入 
计算 机 时 带 有 误差 , 实际 输入 的 是 摄 动 年 阵 | 

A9 — A+8A,. 
WB £ 次 精确 的 互 变换 为 五。 "E dE RIT. W 2 Br £958 Bk 
AD 的 结果 , 相当 于 作用 于 某 一 摄 动 矩阵 ADP, HU 


AO = H (4024 Fy), k=l, e, n, (66) 
右 端 向 量 的 计算 也 相似 ， 
BO=b5+5b, 
BOH, Bf), k=l, =-, n, (67) 
和 矩阵 4 HERA: 
— Ay Urg >- €, 
av=] o p. )»- [2] (68) 


这 时 , 范 数 关系 (65) 近似 地 化 为 
Ajo% Loss] , 
Ux Rem | psl, 
IW scm | Prr rl, 
Wrenlo<l Wle, 
以 及 [dis] dil, k=l, =, n—1, 
上 述 关系 准确 到 计算 机 精度 的 一 阶 ， 38 dg Wilkinson Xj H 
变换 所 作 的 误差 分 析 可 得 ， 
|. losonlessl, [fol <oml adil, &—1, +, », (10) 
其 中 的 “是 一 个 常数 ， 当 使 用 双 精 度 内 积累 加 时 ， 其 值 为 
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(69) 


12.95/ 9 38 BUDE, 
Xbb-—1,2, 5, 09， 利用 归纳 法 便 得 到 下 蜀 关 系 : 
P—QTUA--844- F,], Q,— Hi H,, 
p= Pit+ HiFot+.…+ HH,_F,, 
bo QI (b--8b4-f,), 
f=f1+ Hifot.+ Hi..H, sf,. 
EJ, 2 次 H 变换 所 产生 会 入 误差 的 影响 , AATA 


(105 


A--8A-4- P, b 8b f, (72) 
PTS E BJ), ERR (69)— (0), 便 得 到 摄 动 (72) 的 估 


i | 
PET en! pal tU + los ) pony AX [^ (78) 
Lf San OS] + 1d. den [d.i x pam] bo |, 
于 是 , SOR Je 26 ZU EO HL kA, QU dg e e dË 
SLES i Deut yE S A qr HE PESE 9 
Jy, 其 据 以 建立 确定 矩阵 伪 秩 的 准则 ， 我 们 假定 jp 次 H 变换 
作用 于 4 十 64 的 精确 结果 为 
Ao-QrAT54)- Lf, 9 
Q= H.E, 
以 后 的 H 变换 都 只 作用 于 W, R, 如 末 想 要 计算 能 继 
续 向 下 进行 , 一 个 合理 的 准则 应 是 相对 误差 
Ku We 
i Wilo 
即 OF, PL HE, 
如 果 (74) BOR EUR GE, 就 说 明 舍 入 误差 的 影响 已 使 W, 的 清 
度 完全 丧失 , 即 , 这 时 IV, 中 的 元 素 已 为 含 入 误差 所 深 制 , 它 : 
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实际 意义 ,从 而 便 没有 向 下 进行 的 必要 了 ， 根据 
ET ED (do 的 定义 ;不 难 推出 


IW,- Pos 2, Alo LE, m" | (QU) 
us 可 以 把 条 件 (74) 化 为 一 个 适宜 于 计算 的 条 件 :- 
s Pubs on pul t ties) - (T6) 
E W al z | Pp+3, piil 


这 里 的 pa 十 从 实际 计算 得 到 的 ,一般 说 来 ,中间 分 子 括号 中 
的 第 一 项 [eu] 占 主导 地 位 , 从 而 《76) 可 以 表示 成 
[Wo Wl sloal 1 (TT) 
|W,lo | oprdpsd| 
这 里 的 e 是 区 间 lan, ep7] 中 的 某 一 个 数 ， 这 就 表明 ,因子 
i eal peas, pnl 反映 舍 入 误差 积累 的 程度 . 据 此 便 可 以 给 出 
Tax p PE gk RI HENI, 
给 定 一 适当 正 数 e, 若 自然 数 ” 满足 不 等 式 
pv | <=|pn | < ， Prr] 2 (78) 
则 可 确定 矩阵 的 伪 秩 为 +Ce~ 秩 ). 
关于 确定 伪 秩 的 问题 , 有 几 点 应 加 以 说 明 ， 
(0 在 叙述 一 个 算法 的 基本 因 想 或 步骤 时 ， 我 们 常 说 相 
应 的 矩阵 4 为 潢 秩 或 号 秩 , 这 仅仅 是 为 了 方便 , 实际 上 是 并 
不 确切 的 。 和 矩阵 4 即使 在 理论 上 为 满 秩 , 但 由 于 病态 性 质 比 
较 严 重 ， 如 果 作 为 注 秩 处 理 ， 所 得 计算 结果 将 不 堪 设 想 ， 而 
确定 一 个 适当 的 伪 秩 , 常 能 改善 问题 的 条 件 , 得 到 比较 好 的 结 


B 


QD) 在 实际 计算 时 ， 常 会 发 生 这 样 的 情形 ，jox xl 还 比 
CK, TA oraraa) 却 突然 变 得 很 小 ， 这 是 问题 条 件 较 好 的 反 
由 ， 这 时 ， 确 定 秩 为 上 可 以 得 到 好 的 计算 结果 ， 如 果 序 列 
{iea 5 FET HE, X BU LE 页 的 病态 竹 质 比较 严重 ， 在 必要 
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时 应 考虑 问题 的 物理 背景 , 重建 数学 模型 

Qu) 控制 量 e 的 选择 , 对 确定 伪 秩 十 分 重要 ，s 取得 小 ， 
所 定 伪 秩 就 大 , 反之 ，s 取得 大 , 所 定 伪 秩 就 小 ,一般 可 取 略 低 
于 计算 机 精度 的 量 为 s. 


$4 直 交 化 方法 


4-1 改进 的 Gram-Schmidt 直 交 化 方法 

在 前 一 节 中 我 们 着 重 介绍 了 用 五 变换 对 和 矩阵 <4 作 QU 
或 QR 分 解 . 实际 上 , 如 果 对 怎 阵 A= [a ---, G,] 的 % 个 列 
向 量 用 直 交 化 方法 产生 一 个 标准 直 交 系 qi, n, On 使 每 一 
个 @ 都 是 4 的 前 ?个 列 向 量 s, s, G, 的 线性 组 合 , 并 和 前 
“一 工 个 列 向 量 都 直 交 ， 即 得 到 m xn 阶 列 直 交 和 矩阵 


Q-[q., …, @,]. (79) 
在 这 里 我 们 暂 假 定 rank(A) —n, JJ QERA, 就 得 到 
eal] 
0 


其 中 的 及 是 一 个 wxw 阶 上 上 三角 阵 , 下 方 的 0 是 (m—n) xv 
NPER AmE TER A 的 QR 分 解 
A-QR, l (80) 

因此 , 从 原则 上 讲 ,用 向 量 系 的 直 交 化 方法 也 可 以 求 得 矩阵 的 
QR 分 解 ， 但 是 ,前面 曾 经 指出 ,古典 的 Gram-Schmidt 直 交 
化 方法 的 数值 稳定 性 不 好 , 本 节 将 介绍 它 的 一 种 变形 , 即 所 谓 
改进 的 Gram-Schmidt 直 交 化 方法 ， 此 法 具有 和 五 变换 辐 
等 的 数值 稳定 性 .步骤 如 下 ， 

记 

A=AD= aP, +, aP], aP =a, i=l, + 


h 


— 184 — 


第 一 步 : 令 uns la], 
Ga 一 GD/alii。 


依次 令 a =a — uag, i=2, 9, ++, n, 

并 确定 系数 va 使 I 
aj? |g, ¿=2, ++, m, 

Bj Us qia, i=2, e, n, 


A ua =la], qa aP / us, 于 是 AO 就 化 为 
A= [q q», aP, +, aP]: 
第 二 步 , 仿 前 一 步 的 办 法 , 令 
aP = dj? — uai, 1-38, 4, ne ñ, 
其 中 的 Us, 应 为 
usa, í-8,-, w. - 
并 令 us = ja], qa=aP/us. 于 是 就 完成 了 第 二 步 ， 这 时 
49 化 为 
AG -. [Q:, qs, Qs, aP, +, a]. 
在 完成 第 5-1 2m, 矩阵 AG-1 就 化 为 ; 
A= Iq, t5, Qs aj, 5, 0;], 


其 中 


Us |i], gs = a) /uss, 
Vu QI .10867, $—84-1, ++, m 
于 是 , 经 mn 一 1 步 后 就 得 了 所 需要 的 直 交 系 
| A9— [gy, =°, q.], 
4-9. 选 主 元 与 仿 秩 的 确定 
为 了 加 强 算法 的 数值 稳定 福 ， 在 直 交 化 过 程 中 也 常 采用 
选 主 元 的 方法 ， 其 法 如 下 ， 
在 对 AG = A= [aP, =, aP] 进行 第 一 步 直 交 化 开始 ， 
JEU SUR. (ai?) 中 的 最 长 者 作为 第 一 个 向 量 。 今 仍 记 8 


3e, AA 
un= La], quo ai uas, 
1k s— 12b EL 28 4k SE UR 221 T 
AQO-—[qi, c, Qa; GÉ), 17, 97]. 
在 向 量 系 a, os, a SORGE fE A A? 的 第 。 列 ,并 
仍 记 之 为 mg， 4 
= [e], MA 
u == QQ ¿=s+1l, s, v, 

这 样 继续 下 去 , 24 4 为 满 秩 时 , £8  —1 步 就 完成 了 直 交 化 工 
ff. 

经 过 选 主 元 后 , 序列 (ul) 为 不 增 , EAE A 的 列 向 量 
已 规范 化 ， 则 |ua|=1. WB juu] 就 是 a, 关于 atr, 
qz-1( 指 列 交 换 后 的 情形 ) 的 相对 相关 性 指标 ,在 应 用 直 交 
化 方法 时 ,也 要 确定 伪 秩 , 其 原则 和 前 节 一 样 . 

43 广义 道 矩阵 和 极 小 最 小 二 乘 解 的 计算 

设 矩 阵 4 的 伪 秩 已 确定 为 7, 则 用 直 交 化 方法 便 得 到 了 
分 解 

A-QU, (81) 

Hop, Q&: 是 一 个 mr xr MIEZ SE Be, U 是 一 个 ?xm Brig 
pg, 二 者 均 为 满 秩 ， 这 时 , 若 不 考虑 算法 中 的 列 交换 ， 


A* -U' (UU?) QF, (82) 
而 极 小 最 小 二 乘 解 为 
: r=U (UUN QD, (83) 
关于 QFD 的 计算 可 按 以 下 的 方式 进行 


N Obir AE, 它 的 7 个 分 量 
E | qib, q:5, Ut gib. 
—tB85--— 


XH c 表示 qb, i=l, 2, …, v, 其 值 可 依次 计算 如 下 : 令 
b -b,, e,= gib, (84) 
bua -b;- 09, : 
^4 o RI b ERAS 3 Pt E. 此 法 效果 较 好 , 参阅 文献 [9] 
4-4 直 交 化 方法 的 数值 稳定 性 问题 
关 汪 十 典 的 Gram-Schmidt 直 交 化 方法 和 它 的 变形 ， 改 
进 的 直 深 化 方法 的 数值 稳定 性 问题 ，Rice 在 1966 年 发 表 了 
一 个 数 全 实数 报告 ,并 作 了 一 个 简单 的 误 佐 分 析 , 说 明 十 典 的 
直 交 化 方法 的 数值 稳定 性 不 好 , 往往 需要 进行 第 二 次 直 交 化 ， 
而 改进 的 喜 交 化 方法 下 具有 较 好 的 数值 稳定 性 、BjirK 在 
1967 年 发 表 了 所 作 的 详细 的 误差 分 析 . ， 对 于 用 改进 的 直 交 
化 方法 来 计算 超 定 组 性 方程 组 的 极 小 最 小 二 乘 解 ， 落 使 用 双 
精度 内 积累 加 ， 改 进 的 直 交 化 方法 得 到 的 结果 是 某 一 摄 动 方 
程 


(4+S4)m 一 0 十 SB n (85) 
的 准确 解 . 摄 动量 54 利 ób 满足 不 等 式 
a 
[94 nu [A llen, (86) 
[òb] «2n? bin, 0 


其 中 [+ 5 表示 uL 
lAlz— (Sal), .. (87) 


称 为 矩阵 4 的 欧 民 范 数 或 frobenius 范 数 ， 
用 直 交 化 方法 完成 矩阵 的 QU 分 解 的 运算 量 约 为 
| 2em(n 一 I, 
KERERE- KRAM OE. EH IE dA SE Bi 
大 一 些 ， 所 需 存 贮 基 也 是 这 样 , 这 基因 为 用 且 变换 进行 分 解 
时 , 确定 H 变换 的 向 量 维 数 逐 次 下 降 , 不 但 减少 了 运算 量 , F 
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的 递 推 方法 
5-1 Greville 递 推 方法 一 一 矩阵 满 秩 的 情形 
在 本 节 中 我 们 仍 记 
f Ax= [a =, d], k=l, =, n, (88) 


所 谓 递 推 方法 , 就 是 在 A 算出 以 后 , 根据 一 种 递 推 关系 直接 
把 4 如 + 算出 来 . 这 种 递 扒 方 法, 实际 上 是 Gram-Schmidt Ë 
变化 方法 的 一 种 实现 形式 ， 为 了 说 明 它 们 之 间 的 关系 ,我 们 
-的 讨论 就 从 矩阵 的 QR 分 解 着 手 ， 首 先 我 们 考虑 矩阵 A. 
满 秩 的 情形 ， 对 A, 作 QR 分 解 

A, = Q,B,, (89) 
其 中 的 @ dE T mx n Br p] 8 228 E, R, 是 一 个 非 奇 蜡 的 
nxn 阶 上 三 角 阵 ， 令 名 = ig, s, qu). 由 此 可 知 
H Q= [gy,…, QL], 而 Br 是 BR, 中 位 于 左上 角 的 那个 
kxk 阶 上 三 角子 矩阵 ， 根 据 A, 的 分 解 式 (90) 可 得 


A= R, Q. (91) 
pa kn 7 1, 因为 
a Aya [Ar 1 05,3], Qua [Qr : Quri], (92) 
Ry Tui 
R 
+ | 0 "m (93) 


其 中 的 rua 表示 一 个 大 维 列 疝 量 ， osa 是 一 个 数 , 不 难 验 证 
Ry — Rg Tri/ osi 

Ry (94 

k+1 | 0 1/ay41 I C 4) 
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从 而 有 


Tí == Qr, Akti = Quads, (95) 
于 是 就 可 把 Bi 具体 表示 成 
l R= [ R 一 Kab yu ikiwa ]. (96) 
0 1/Qt,1043 


据 此 , 我 们 就 得 到 表达 式 


Rr:Q ~ R EAr 

Ala Rhin “1 Pt | (97) 
T 

L Q0 dea 
联系 到 前 节 中 的 直 交 化 方法 , 向 量 quaa 是 由 疝 量 4141 在 
RA) 上 的 直 交 投影 Cra 而 生成 的 , 即 

Cki == (I, 一 4 : (98) 
而 
Cyri. (99) 


Ir = 一 T 
[Creij 


X, BEN cua 0, CHT S 3€ 


cham (ehacu) hi= i GR, — (100) 
TIRT 
但 
[Crp = €t dus = Akka Cra l f (101) 
、 i T ot 
所 以 Ti = 一 Cr+l。 
TE, RER (97) 便 可 以 表示 成 


， Az UT At O41) 
Aii-| en |. (102) 


公式 (102) 便 是 计算 广义 逆 算 阵 的 按 列 递 推 关 系 . 

注意 到 €i, -, Cx 都 属于 R(A,), WDA 

. Ay ANC, =C, ¿=1, Ut; k 
这 就 是 说 , 向 量 C, …, cx 正 是 秩 为 于 RIPE RE ALAZRU 
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EDEN PEEB, 并 且 是 一 个 直 交 系 , 从 而 便 得 
到 AA 的 讲 分 解 公 式 | 
A,A =c.icr + --- Tec. (108) 
联系 到 (98), 公式 (103) 可 以 用 来 计算 Ck... 
5-2 Greville 道 推 方法 一 矩阵 亏 秩 的 情形 
如 果 


| rank(A,)- r«n, rank(A,) = r, (104) 
yg Ek A, 的 分 解 式 为 : 
A, 9,7, 
其 中 的 站, 是 一 个 ”xm 阶 上 梯形 阵 , 它 的 形式 为 ， 
Ü, -- LB, U,1, (105) 


这 里 的 R, 是 一 个 ?x+ Et = fg W: U, 是 一 个 "x @ —m) B: 
矩阵， 在 算出 AZ DES, EE RI RJ QR-LLT 分 解法 直接 把 
A+ 算出 来 ， 计 算 AT 的 公式 如 下 ; 因为 

U=; ai *, €], 


令 : 
V,=R U, =A} [d,.1, ... a,l, 4 
Io. VIV.-—L.D., (106) 
岂可 以 把 AT 表示 成 
~ RPR ROU, (LAL) VIR Q, 
a| mU V am 
(LLL) VFR Q? 


mR Lari, "ty (A 记 为 Arn 由 于 V= RTQ Ann 所 以 
有 


| Vo At Ann (108) 
从 而 可 以 把 AZ RRR 
. FB, 
4:=| o. I (109) 


BeAPeY.4. 05 
| €, (I. Hg DIAS. 
5 3: 选 主 元 与 伪 秩 的 确定 
1 谤 失 方 法 计算 广义 道 矩 阵 47 B), — M 
gius 入， 也 需要 应 用 选 主 元 的 方法 ， 和 改进 的 Gram- 
Schmidt 直 交 化 方法 中 选 主 元 的 情形 一 样 ， 首先 在 aP, cs 
Cj 中 取 长 度 最 大 的 作为 第 一 个 列 回 量 aj, ^ 
c=a ` E 
计算 aj? = (I — cce} Dap, $—2, =e, n, 
选 其 中 的 长 度 最 大 者 作为 a 外 ,并 令 
c, = a>, 
Rir- FESAT e, 计算 
att -= (I--eenaP, i=k+1, e,n — (12) 
取 其 中 长 度 最 大 者 作为 e, 30 
Cy Ob. ^ , 018) 
在 选 主 元 的 过 程 中 , D EISE AB BE: EMIR BS] P0] 2 38. 因 
Jy rank(A,) =r, 在 算出 ce, 后 选 主 元 的 过 程 就 算 完成 :; 由 于 
年 阵 的 秩 事 先 并 还 知道 ， 要 在 选 主 元 的 过 程 虫 来 确定 ， 容易 
看 出 , 向 量 c, 实际 上 就 是 向 量 au ÆR CA, E BJ 8 35 HE 
影 5 和 矩阵 中 的 列 向 量 顺序 由 于 选 主 元 可 能 发 生变 化 )， 所 以 其 
KE af EEE z, A Toda. 01a 的 相 对 相 关 性 指 
标 ， 对 给 定 的 控制 量 e, 若 不 等 式 | 
lcxnl<e iei «ied LE (114) 
成 立 ， 就 确定 矩阵 的 伪 秩 了 了 一, ZEN" 
5-4 按 行 递 推 和 极 小 最 小 二 乘 解 的 计算 
ARTE JY REB AE REDE, men, 这 时 以 RE abad 
;把 系数 甜 阵 中 的 行 改 威 列 ,并 记 之 为 . | | 


| UI 


A, e AT - [G,, «^, da], (115) 
右 端 的 向 量 di, n, On EAR A, 的 ww 行 转 置 而 成 的 ,在 
这 种 情形 ， 我 们 可 以 应 用 前 面 讲 过 的 按 列 递 推 方法 来 计算 
外 ,根据 转 置 关系 


A; = (2D, (116) 
最 后 就 得 到 了 所 需要 的 广义 逆 年 阵 AT. 我 们 仍 分 满 秩 与 号 
秩 两 种 情形 来 考虑 ， 
满 牧 情形 . 据 (102), 
Áta-| Ai Creta l aD 
Cu+l 


Át-atf, €; =t, 
REII _ 4 4 
(Ada) = [( Az)" -eihara(Ai) : etA]. — (118) 
记 方 程 的 右 端 向 量 为 
b= [Bs, Ut Bs, 
并 记 其 前 上 个 分 量 组 成 的 向 量 为 
f Br= [Br *5, BT. (119) 
TB 9$ 3488918 3k NL SER €y E 
aum (AD) b, š=1, 2, e, m, 
则 据 (118) 得 


Syn (A) To 


=A- etat CAD* : eita[ w ] 


Bk+1 
= mi ir (Er) CH (120) 
其 中 ry (2) ERE k+1 DREY x =m, 时 的 丈量 
tt) = Beri — dz iR, (121) 


为 简单 起 见 , 记 其 为 da 于 是 便 得 到 了 计算 2, 的 递 推 关 
系 ， 当 矩阵 AL RETN, z, 便 是 相应 线性 方程 组 的 极 
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小 最 小 二 乘 解 ， 这 时 , 由 于 ome, MANEAR NIS 3E 
五 都 相 容 , Br bt, =, 在 这 种 情况 下 也 是 所 给 右 容 线性 方程 组 
的 极 小 范 数 解 。 

却 秩 的 情形 , 应 当 指出 ， AENM SECULAR 
因为 ， 即 使 系数 矩阵 在 理论 上 为 满 秩 ， 由 于 问题 的 病态 性 质 ， 
也 常常 需要 在 算法 的 执行 过 程 中 ,确定 一 个 适当 的 伪 秩 , 以 提 
高 算法 的 效果 .” 为 了 提高 算法 的 数值 稳定 性 ， 这 里 也 采用 前 
述 选 主 元 的 方法 ， 并 在 选 主 元 的 过 程 中 把 矩阵 的 伪 秩 确定 下 
来 , 我 们 假定 l 


Ci, €5,.*5, Cy 
已 经 算出 ， 现在 根据 改进 的 Gram-Schmidt 直 交 化 方法 ， 来 
确定 €i, X j=k-+1, tes 05, 依次 计算 


1 cic? ñ 
cj'D-ep—-————euc (122) 
Cid, 


选取 其 中 的 长 度 最 大 者 作为 Crs 

Cri = CPP. 
这 时 需要 活 当 的 列 交换 ;对 原 绩 性 方程 组 来 说 ， 是 相应 的 行 交 
E.» AA a ik XCERRISL E 874) 3 e SP PETRI BUE 38. Wo 
的 次 序 不 变 . 为 了 根据 如 扒 关 系 (120) 计算 Xrti, 我 们 nf d 
BERE 


dinhi- Scla /cla)d . — (29) 
KHARE daa. MARREK s, 当 
Iernile 


时 , 就 确定 矩阵 的 伪 秩 为 计算 出 z, 后 就 完成 了 第 一 有 阶段 
的 计算 ， 然 后 , BEAR (19) 有 Ë 
a | 
m lo} | 
— B-a. 


On (Ent VIV) PIA, 

B,- 2: -V Ôn. 
TE, BEA ÂTæ=b 的 极 小 最 小 一 A 2^ 就 可 以 根据 公 
式 


(125) 


-Ab- [Â}"- Ovi i eu[, “| | (128) 


b, s. 


An NO Ut Bal”. Ji SA XS RI DIESE t 
wn= Ab, -ÓLy Ib, 二 On " 
=g, -Ôr V Tb + OTD,,. | QD 
在 参考 文献 [12] 中 曾 对 以 Hilbert % Bg E, Ap RAE 
阵 的 线性 方程 组 , 就 % 一 7, 10, 20, 80, 40, 80 0100 L#F $ 
形 进行 了 计算 ， 并 对 本 节 的 算法 和 Oholosky 方法 进行 了 对 
比 . 总 的 情形 见 下 表 ， | ` 


Cholesky 法 ” 递 推算 法 


7 6 位 有 效 数字 ， 位 有 效 数 了 
10 eC 无 一 位 有 效 数 ' “5 你 有 效 数 10: 
20 ` 无 一 位 有 效 数 ETT 10 i 
3o |o 无 二 他 着 效 数 ` ”3 位 有 效 数 10 
E 无 一 位 有 效 数 “ ` “883 位 有 效 数 ` x 
无 一 位 有 效 数 2 位 有 效 数 10 
无 一 位 有 效 数 … 工 位 有 效 数 ， 


Bm. le[cemic 8 ZEN 
就 中 ， Hab, MORARA Š ha 为 Hw 的 
元 素 , 因 此 这 人 EER. [i 1,-, 4"， 实 际 计算 
结果 如 下 : 
' 0.99990 1.0010 ` Ó.99708 1.0002 1.0002» ，， 
1.0008 0.99945 0.99867 0.99856 0.909891 ^ 


TT 


ro 


0.99046 
1.0009 

0.99999 
0.99939 


1.0000 1.0004 
1.0008 1.0006 
0.99979 0.99962 
0.99989 0.99944 


1.0007 1.0009 
1.0004 1.0002 
0.99950 0.99962 
0.99952 0.99062 


0.99974 0.99986 0.99999 1.0001 1.0002 

1.0002 1.0008 1.0008 1.0008 1.0002 

最 后 我 们 谈 一 下 关于 控制 量 。 的 选择 问题 ， 在 上 述 计 算 
ng T Pa Se pK cce; 和 cca, 一 般 控制 在 

lel? = efe, x:10719, 

在 使 用 era] 进行 控制 时 , 由 于 cx 从 理论 上 讲 应 和 an, s, 
x-1 都 直 交 , 而 实际 上 是 用 改进 的 Gram-Sohmidt 直 交 化 
方法 计算 出 来 和 的， 这 种 直 交 人 性 并 不 严格 成 立 ， 当 cvl 变 得 
很 小 时 , 舍 入 误差 的 干扰 就 逐渐 明显 地 表现 出 来 。 基本 情况 
Æ, 4 jcgax| VT 1077 BF, 以 后 就 开始 回升 . 而 从 计算 的 
实际 结果 来 看 , 也 正 是 在 回升 之 前 所 确定 的 伪 秩 效果 最 好 . 因 
则 ， 我 们 可 以 利用 这 一 情况 ， 对 确定 伪 秩 的 过 程 进 行 自动 控 
制 ,而 不 必 先 给 定 控制 量 e, 


86 大 型 稀疏 线性 最 小 二 乘 间 题 的 计算 方法 


6-1 引言 

在 科学 技术 的 许多 领域 中 ， 例如 , 经 济 模型 ， 地 震 数据 分 
析 , 航空 测绘 以 及 利用 有 限 元 方法 进行 结构 分 析 中 , 常常 会 遇 
到 大 型 稀 玻 线 性 最 小 二 乘 问 题 ,这 一 类 问题 中 前 系数 矩阵 A 
不 俱 是 稀 琉 的 , 而 且 还 具有 一 种 特殊 结构 . 因此, 可 以 利用 矩 
阵 的 特点 来 计算 问题 的 极 小 最 小 二 乘 解 。 本 节 所 讨论 问题 中 
的 矩阵 4 来 源 于 大 地 测量 问题 , 它 具 有 以 下 的 形式 : 
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有 特殊 结构 
N . 


AER 4 289 m xm 阶 , mm H rank(4) =n, HERREN 
程 为 


Aa =b (129) 
62 QR 分 解法 : | 
IERE 4 可 以 表 杀 成 
T Á Asat Asa 
As Aaa Aa, 94-1 | 7 
ARM o0 08 PO ` (880) 
| 0 — : ; 


| A, Ana "Ut Ass] 
在 这 里 三 区， 右 方 的 块 子 矩阵 A; DE ERSTER, Aye e 
方便 , 对 它们 暂 不 加 区 别 ， 依 次 , 对 每 一 个 AE QR 分解 
R; . . S o- 

QA-| o |, i52, (131) 
PEBE Q, 是 一 些 m,x m, Bp H 2648 BJ EA, B, E. — Beni x nt 
非 奇异 上 三 角 阵 ， 这 相当 于 用 mxm 阶 直 交 阵 Q sc Se SE 
BA, 这 里 2 


Q= ga 7 S (132) 
| Q: 
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应 当 注 意 的 是 ， 在 执行 运算 时 , 每 一 个 必 只 [和 A, Bf E m, 
行 中 的 子 块 有 关 , 它们 是 
A, À i £1°" "A, 24-1; 

而 与 其 它 子 块 无 关 , 所 以 可 节省 不 少 计算 量 . E 

Qi LA; P 8 i s-a] 

T h, Qu ， AQ (1 ` . 

"lo "us pu (188) 
TEX] i=l, 2, ee, 上 作 完 上 述 分 解 后 , 经 过 适当 的 行 交 换 , 由 
TEK LA qae Rel ey y T, Q74 & T 3E. 


[. R. Aa eeeestee ósea AQ& /2)41 *** AQ -OD 
: (o D) 
R, At p trennen Ahuna t** AB)... 
am 07 a) 
. igi | Afam ttt ARa . 
e| 
QTA-— Azas | Ayma ** - AQ . 
. . * 
| (^ .. `. M 
i 
| 4d p 1 
Af 22 cus] AB auna t ARD aia 
U (1 a 
局 - | Aa A eu Ut Aa 


(184) 
然后 , 用 前 述 方 法 对 新 生成 BERAR 


A tts 
AP s 
实行 三 角 化 ， 完成 后 进行 行 交 换 ， 卸 新 的 正方 上 三 角 阵 向 上 


D 我 们 假定 答 阵 [4 所 具有 的 等 丈 结 ITUR A 分 解 得 以 实 
现 。 
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FE. 以 后 仿 此 进行 ， 最 后 就 得 到 了 矩阵 4 的 QR 分 解 
R 
A= 
qos 
f R. A9 Tt AQu 4 
R. AQ c Aha 


R= . : (185) 
Bus. 


这 时 , 原 超 定 线性 方程 组 就 化 为 
Ra: = c, 
这 里 的 右 端 向 量 c ym BE pg di d 的 前 m 个 向 量 , 应 当 指 
出 ， 在 矩阵 4 分 解 过 程 中 作 行 交 换 时 ， 右 端的 分 量 也 应 作 相 
应 的 交换 , 对 每 一 个 4; 为 选 主 元 而 需 作 列 交换 时 , 的 分 量 
也 应 作 相 应 的 交换 ， 
把 回 量 w 和 右 端 向 量 c 都 按 RR 中 子 块 来 分 段 ， 并 记 之 
为 ， x c 
1 1 
-0 14]. os 
š L taa J L €21.1 
其 中 , x, 和 c; RE v PEI], Xm n, 
利用 回 代 , 依次 解 三 角 方 程 组 : 


1? Bu 1203.19 631 
21—1 
2? Rim, = €, 一” > APE, $—21—2, 21 —8, str; 
d=t+1 
o 2t—-1 . 
3 Bm,-ce- D Am, V1, i-—1, ...... , 1, 
ætt 


最 后 就 得 到 了 所 需要 的 解 . 
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6-3 LT 分 解法 
本 章 开头 记 介 绍 的 LU 分 解法 , BJ, Gauss 消去 法 , 也 可 
以 用 来 解 这 一 类 型 的 最 小 二 乘 问题 。 今 简 述 其 步骤 于 下 . 
第 一 步 对 每 一 个 主 对 角 块 AL JE LU 分 解 , 但 选 主 元 内 
限于 在 A, 内 进行 以 免 破坏 矩阵 的 结构 ， 设 
P,A;,PS— LU, 


其 中 L, 39 F BEBE, U, 为 上 三 角 阵 , 它们 的 形式 为 : 


|Z 


P, P, 为 两 个 排列 阵 

”和 前 法 一 样 ， 了 人 多 了 位 和 合并 最 后 就 

RH TIGRE A 的 LU 分解 I 
PAPO AE, 


W U 的 形式 为 


有 一 定 的 结构 


了 是 -- 个 分 块 上 宰 形 阵 ，72z 的 形式 为 
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第 二 步 , 用 分 块 Cholesky 分 解法 解 方程 组 
L'Lw-L'Pob 
第 三 步 ; 利用 回 代 解 方程 组 
Uz-w, 

第 四 步 , 4p z= Pez, 就 得 到 了 所 需要 的 解 

最 后 我 们 指出 , 在 前 述 两 种 算法 中 , QR 分 解法 具有 较 好 
的 数值 稳定 性 ， 如 果 和 矩阵 4 的 条 件数 不 太 大 ， 得 到 的 结果 相 
当 精 确 , 而 且 , 在 增 、 减 变量 个 数 和 观测 次 数 时 , 也 便于 处 理 . 
关于 LU 分 解法 , 从 数值 稳定 性 来 说 ,不 如 QR 分解, 但 是 却 
优 填 通 常 直接 解法 方程 的 方法 ， 而 且 , 一 般 说 来 , 此 法 比 直 交 
化 方法 更 有 利于 保持 垂 阵 的 笑 玖 性 ， MEM 
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EE 


^ AE Drazin 道 


i 
eU 


i gb H 

在 本 书 第 2 章 中 ， 我 们 从 线性 算 子 方程 求解 问题 出 发 发 , 引 
Xt] —Àpy X3 WT, JT se Y RA SCC BE 00 
基本 理论 。 这些 广义 道 矩 阵 保留 TESEH ELMETE 
D, 但 也 失掉 了 另 一 SENE, 例如 ， 车 4 为 % 阶 非 奇异 方 隆 ， 
MIE EREE RE A~ 1 具有 下 列 性 质 : ，， 

(i) 4A71— A714, B 

ii CAyPIL( A?)-1 - oa na 

d) raa M jp AENA mE 

Gv) AE CA) 必须 且 只 1$ €o(43), , 
这 里 的 eo) EDE 4 的 特征 值 集合 ， 并 县; 

jt -人 5OXPAÉO,. IEEE 
0, 04-0, . 

AWE A^, Av, An MAF, 一 般 不 具有 这 些 性 质 
在 这 个 附录 里 我 们 将 介绍 方 阵 的 另 一 种 广义 道 ， 从 某 种 角度 
来 看 ， 它 和 通常 的 道 和 矩阵 更 为 相似 这 类 广义 道 就 叫做 矩阵 
的 Drazin 3f, 或 Drazin 逆 短 阵 ， 这 种 广义 逆 矩 阵 在 奇异 线 
性 常 微分 方程 组 以 及 奇异 线性 差分 方程 组 求解 问题 上 有 重要 
JV Hn. 

和 和 第 2 章 一 样 ， 越 们 先 考 虚线 性 算 子 的 Drazin 3f, 然后 
要 考虑 Drain dE 在 本 附录 里 ， 我 们 所 考虑 的 线性 算 
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Ta 都 是 从 空间 €^ 到 ?的 线性 算 子 , BECUETTIIRPERUm. 
WE n MAE. 


$ 3 线性 算 子 的 结构 


2-1 线性 算 子 的 指标 及 空间 的 相应 不 变 子 空间 直接 和 
分 解 
我 们 首先 证 明 一 个 引 理 ， 
SIE 1 对 于 任何 线性 算 子 4, 总 存在 一 个 最 小 的 非 负 
ENDE, BE 
2 (A7) 222(A) 9-5 ACAD) = CAT) =-=, ay 
ACA?) CI CA) Cc ICA) = IC ARI) =..., 
B 2 CA? n An CA) — 167. (2) 
这 里 我 们 约定 AO =I KARAT. ' 
证 明 XRO 等 价 于 
dim Z(A?)7dim Z(A)»-. dim Ga 
—dim B(A =... 
dim .ft(4?) 一 Bim. JA) CA*) 
一 dim WO (At) ILE 


因为 l 
«dim ALA) ac <, 


| o o Badin A (AD >dim N (A52>0, P 
»p$—0, L7, BOB TET RUBRI TE UE E B, ZEND 
T dim Z( A) —dim Z( A**»); 
F 2 对 任何 6>1, 显然 有 
RA =R AHY 
MESS a vs S 
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dim A( A) dim RAW) — dim AAD, 
HF l 
dim Z(A1)+dim A^ (A = 


据 些 可 以 证 明 第 二 个 关系 式 也 成 立 ， 
现在 我 们 来 证 明 D; 即 子 空间 CAP) m NA) 中 
唯一 的 共同 元 素 是 零 向 量 ， 为 此 设 
zc) n. CAD, 
则 必 存 在 向 量 yEW'* 使 
æ= ÁY. 
但 Axa = A? —0, 
这 就 意味 着 y € A^ (A) — A7 (A), 
所 以 必 有 X=0, 
于 是 引 理 得 证 . 
定义 1 引 理 中 的 最 小 非 负 整 数 称 为 线性 算 子 息 的 
指标 (Index), 记 作 
Ind(A)- f. 
线性 算 子 A 所 确定 的 空间 Z" 的 直接 和 分 解 
因为 | 
AZCAP) — A (AF) —- 22A), 
AN (A=. (A =N (AM, 
所 以 , ZCAT RNA 都 是 线性 算 子 A 的 不 变 子 空 间 . 此 
外 , 由 于 ACANNA — 90}, 从 而 有 直接 和 分 解 
@= 2 (A) CAM, (3) 
我 们 称 (3) 为 空间 :多 " 由 线性 算 子 种， 所 确定 的 不 变 子 
空间 直接 和 分 解 ， 
2-2 线性 算 子 的 分 解 ` | 
据 空 间 ^ 的 直接 和 分 解 (8) u 可 知 ， EH & £ € 
^, d RI ELME OU K ZS JL y 
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u wu, 
其 中 EB(4*), ve M (Ab. 今 规定 算 子 A. AST. 


Ax=Au, Aw=—Av. (4) 
Aiw=0, Au-0, (5) 


从 而 有 ， 
(4+4 x= Au-- A= A(ut- v) = Az. 
由 于 上 式 对 任何 a 都 成 立 , 所 以 有 | | 
A= A; t À,. (6) 
这 就 是 说 , 线性 算 子 A 可 以 宕 示 成 线性 算 子 A, 与 A, 之 和 . 
我 们 称 (6) 为 空间 "的 直接 和 分 解 (8) 所 确定 的 线性 
算 子 A 的 分 解 ， | 
线性 算 子 41 AS 具有 一 些 重要 性 质 . 
定理 1 对 于 线性 算 子 和 的 分 解 (6), 我 们 有 


Ind(A)<1, AƏAA,= AsA,.=0, (v) 
FB, ADR b kapas l . 0 
| Ai-0, APY!'«0 (8) 


其 中 k—Ind(A). 
证 明 我 们 分 两 种 情形 来 考虑 。 
1) dimd(A)-nm, - 
这 时 , Ind(A) -0, 即 5=0。 册 于. 
BA) FE (A) -(0), 
所 以 ` A= A; A,=0, A,A. AA =0, 
2) dimZ (A) «n, . 
这 时 b—ind (A)>0. RAWH 2(A)= (AD, Br 
B, Ind(A, =1, 对 任意 的 l 
X=UtUV, uc2Z(A5, wvCc.*(A», . 
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Aic -(A-- Ait (A- A)'€A- A) (uo v) 
= (A -— AD - (— Ato. 
由 此 可 知 有 iw 三 6, 所 以 
. Ai-0, 
WiMpéeknpy, A20. Br A, E E katak, 另外 ， 
A,AÀ;m— AA. v)— A,Av—D, 


fa] 理 有 Lim 一 A Au = 0, 
WW AAa= A.A.=0. 
于 是 定理 得 证 , . 


定理 2 在 前 述 定理 中 的 条 件 下 ， 分 解 式 (6) 是 唯一 
的 ， 即 , 若 A= B+ B, 为 另 一 种 分 解 , H 
B,B,— B,B,—0, 
Ind(B) «1, B, 7j k RB ER, 
则 必 有 B:=A,, Bs= Ao, 
IE MRK, ` 
定义 2 我 们 称 分 解 式 (6) — "TTE A 的 
核心 (sore) 部 分 , ft Aa 为 A HIRR (nillpotent) 部 分 ， 
- “用 归纳 法 可 以 证 明 ， .对 任何 正 整 数 p， EE 
A= At-- At, . (9) 


$3 线性 算 子 的 Drazin 逆 及 其 基本 性 质 


3-1 Drazin 计算 子 的 定义 
设 A= AtA 和 


为 线性 算 子 A Sik Ñ| ESE yk. EAF A, 的 定 x» k 
知 ,在 子 空 间 2 CAT) E Az A ERE | 
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AZ (A) - 2A), 
这 就 是 说 , 41 在 ZAS 与 其 自身 之 间 建 立 了 1 一 对 应 关 
系 ， 所 以 ,在 (AD E, AT Aa k mit, VG A, 为 只 
定义 在 CAM) 上 并 在 其 上 与 公 恒 等 的 线性 算 子 。 我 们 有 
定义 8 设 4 为 给 定 的 线性 算 子 , 今 规定 算 子 42 如 
下 ， 对 任何 e—ucvc«", uc RCA, VEN CA), k= 
Ind(A), 
Az = Aru, (40) 
出 A? 为 线性 算 子 , 3 22 A 的 Drazin WAF., 
据 算 子 AD BEXT, E z €. (AD, 则 必 有 
A?x = 0, 
并 且 , 对 任意 的 EE 级 (4”), BEA 
AA?"u—u; Á"Au-u, 
而 对 任意 的 VE NA), EE 
442pD 一 4240 —0. 
这 就 表示 , 对 一 切 ec, TUS 
AA?x = AP Az. 
Jin c 


AA? — AA, | (1) 
， 此 外 还 不 难看 出 , 算 子 AA 或 APA, 实际 上 就 是 空间 
分 解 (3) 所 确定 的 沿 子 空间 CAT) SEE ZR BJ ZCA 上 的 
投影 算 子 , 即 | 
o AA» — APA =P, 2CAD, A CAT) , | (12) 
进而 可 知 : . , 
I~ AA’ =I- APA= Pran aan. (13) 
3-2 DrazinjE ATARE 
根据 线性 算 予 Drazin 逆 的 定义 , 我 们 已 经 证 明 A HA 
可 交换 , MRR G) 成 立 ， 现 在 我 们 来 证 明 : 
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定理 3 线性 算 子 4 的 Drazin 3t AP E F 312 R: 
APA A? = AP, (14-1) 
AV AD AF, (14-2) 
Ht £-Ind(A), 
证 明 HEARE c—urvcv^, R'HRucZ(A), 
vc.A (AP, TUR 
APA A?z = AP AA:1u = Atu 
= ÁP(tt-v) = A"x, 
故 有 A"AAP"-AP 又 
Arti A? x= AV ( AAP u 
= Atu = A (u-v) = Atx, 
从 而 有 AA” = Ab. E, 

此 外 , 进一步 还 可 以 证 明 

i384 RA, G EJ OS K V C BEER VE TET, kb 
Ind (A), 4 G— A2, 其 充分 必要 条 件 为 ; 

(i) GAG=G, 

(ii) GA- AG, (18) 

(i) A*'G- AF, 

证 明 条 件 的 必要 性 已 经 证 明 ， 现 在 只 需要 证 明 条 件 的 
充分 性 就 可 以 了 ， 现 在 我 们 来 证 明 , 满足 条 件 (15) 的 线性 算 
予 G 必 具有 下 列 性 质 . 

HER H wuto, HibuczCA), ecl CAP), WE 
有 

AGu=u, 
AGv=0. ae) 
因为 
Ati Gæ = Atx = Au = A AGu, 
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Bp E A*(u— AGU) =2, 
ARR u-AGuc. CAS, 而 AGu= (AG)'u— A*G*u, 


所 以 u— AGU C ZA), 
从 而 恒 有 AGu =t, 
HL (16) 之 一 成 立 , 25 —23 Hf 
Go -GAGv—--.—G(AG)'v 
= 65" Av —6, 


H (16) 之 二 也 成 立 ， 于 是 必 有 
G—A? YED. 

(15) 中 的 (让 ~ Gil) 使 是 Drazin 道 的 特征 性 质 ， 应 当 
ii, Ye Gu) him k AUAE— 4 po, 对 Drazin 逆 来 说 ， 
HR Gu) 仍 成 立 ， 

3-3” 算 子 核心 部 分 的 表示- 

线性 算 子 A 的 核心 A, 具有 特殊 的 性 质 , 现在 我 们 用 A 
的 Drazin 道 A? A, 表示 出 来 ,我 们 有 

定理 5 A4,—4A^4A, (17) 

证 明 4 

B,- AA"A, B,—A— AAA, . 
我 们 只 项 证 明 线 性 算 子 B, 和 B. 满足 定理 2 中 的 条 件 就 行 
T. EE 

# Ind(A)—5—0, 这 时 和 为 非 奇 异 线性 算 子 ， 这 时 
A= AC, 定理 显然 成 立 ， 今 设 N>>1. .因为 | 

AA? A) = HAA) = ASZ2CAP) 

== AP2( At) = B(A") = 2((AAPA)2), 
中 而 可 知 Ipa(AA2A)—1, Bl Ind(Bj)—1, 3j, 
B.B.- AA" A(A—AA?A) — ASA? — ASAP) 
= ASA APA —A5(AU3-- 0; 
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EHIE B,B,=0. 
现在 我 们 来 证 明 B. R k K ta PE F. 对 任意 的 w= 

urt, uE RCA, ENA", BEA 

Bix = ( A— À AP A)tas —A*(I — AAP)" (u+) 

= Á*v—8, 

所 以 必 有 Bi-0. H, FER v ENA”) W ed. (Ar-35, 
HXH v, 

Biiv—(À—AAPA)*?o—A*31(T— AP Ay 1v 

= Az 0, 
从 而 可 知 Bi120. 于 是 我 们 便 证 明 Bs 是 一 个 上 次 等 零 算 
CT. Web, B,= Ay. El 
A.,= AAA, 


定理 得 证 ， | 
为 了 把 线性 算 子 4 BJ D-E y iB N E 1 W Ë, 
我 们 把 A 的 核心 部 分 ( 即 ADER Ca 而 把 A EE A 
RA NE A). TES 
CA~AAA, NA-—A-CA, (18) 
不 难 证 明 ， 对 任意 的 正 整 数 p, 线性 算 子 A 的 核 心 - 圭 


Ag». 


其 中 的 C3 为 A? 的 核心 ,而 NA 为 4? Bara WA. 
根据 我 们 用 来 表示 核心 和 考 零 部 分 的 记号 ，(19) TJ ELE 


Re C4-CA, N4-NA, (20) 
Eih 我 们 还 不 难 证 明 , HERRERA p, 恒 有 
(A)?— (AP). (21) 
因为 ， 一 方面 空间 ?由 算 子 Am A? 所 确定 的 不 变 子 空间 
分 解 是 相同 的 , 男 一 方面 ,对 任意 的 


=U +V’, uc Z(A*), vc .1 (A9, 
kb — Ind( A), | 
RHES 
(AP) Pæ = (AP) "71 AP = (AP) ArH, 
== aa = (AFDE = (ADUE = ( Az). 
3-4 Drazin ġia (Group Inverse) 
—JHt ise, RET A 的 Drazin M 4? 不 满足 关系 
AAA=A, (22) 
只 有 在 一 定 的 条 件 下 AP 才 具 有 这 种 性 质 ， 我 们 有 
定理 6 关系 (22) 成 立 的 充分 必要 条 件 为 : 
Ind(A)<1. (23) 
证 明 # IndCA) —0, W A Jude SR, 这 时 A= AT, 
(22) WARY. R InaCA) —1, Xit, ERR 2 == t-t, 
uc A) vc. (AD, DE 
A -— Av = 0, 
A= Au= A(u v) = Az. 
从 而 可 知 N=As=0, Ci = A,= A= 4A?4. 
如 果 Ind(A) — x21, SK (22) R, 必须 
(A= 2Ç( A AD A) = AR AP) = A222( AF) 
= AY), . 
从 而 必 有 2#(A)=20( A). BB k=l, EP. ` 
EX4 3 Tnd(A)<1, Wiss A H Drazin 3i A" Xj A 
ittis, iode A*. 
根据 群 逆 的 定义 可 知 ，A*# 具有 下 列 特征 性 质 ， 
(i) AA*A-— A, 
(ü) A*AA*-— A*, . (24) 
(i) A*A-—AA*, IE 
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Drazin 3647? 3 Ex A*, Ra AS AS L... 
条 件 下 它们 证 A RMA ed 
定理 ? mg AAt p At OX A 
和 4+ 可 交换 , 即 . 
A*A—AA':, ^ Quy 
证 明 车 (25) 成 立 , 则 At 便 具有 A* na 
所 以 这 时 必 有 
A — AP As. . ahud 
反之 ， dat A?, Was i 
424=4， i 
从 而 可 知 A+- Á*= AP, HE, 


$4 AEREBJ Drazin 3s 


41 3# 
设 4 是 一 个 给 定 的 从 空间 ne" mia, 在 空间 
v^ 中 建立 了 坐标 系 以 后 , FIOR 13€ 4-8 中 的 方法 ， 可 以 把 它 
表示 成 一 个 唯一 的 ” 阶 方 阵 4， 反 之 ,一 个 郊 阶 方 阵 4 也 
确定 了 -一 个 相应 的 线性 算 子 A, 在 给 定 的 坐标 系 h, AEA 
的 矩阵 表示 .nn 阶 方 阵 和 从 v6" 的 线性 算 子 之 间 是 一 一 
戏 应 的 。 不 但 如 此 , 而 且 在 所 给 定 的 坐标 系 中 ,线性 算 子 A 
$n B HRE AB, Jnd Jg A R B W 36 B 32 78 À $h 
BERE, 线性 组 合 Aq BB 的 和 矩 降 表 杀 为 线性 组 合 a4 十 
BB. 其 中 ,车 A 为 非 奇 异 , 则 首 算 子 ACT BO ARTE Sta IT: 
单位 算 子 了 的 信 阵 表示 为 单位 隆 了 ， 从 线性 算 子 和 SENE 
之 间 的 这 种 对 应 关系 出 发 , 我 们 很 容 5 s Dri Sg E 
的 概念 和 有 关 性 质 ， l 
Se 


. 定义 和 5 设 % 阶 方 隆 和 4 是 线性 算 子 各 在 给 定 坐 标 系 中 
WIEREEK, 记 Drazin MAF AP 在 同一 坐标 系 中 的 矩阵 表 
RA A, 我 们 称 AP WER 4 的 Drazin 3f, : 

因为 线性 算 子 A 的 Drazin 3t 4? 是 唯一 的 ， 它 在 给 定 
钳 标 系 中 的 振 阵 玫 示 也 是 唯一 的 ,所 以 ,矩阵 4 的 Drazin 3r 
SER: AP m dne — BJ 

根据 Drazin BEER Drazin WRF [8] BJ _E. Ë W Z 
关系 , 为 建立 Drazin 逆 算 子 所 引进 的 一 些 概念 以 及 关于 
Drazin 逆 算 子 的 性 质 , 都 不 难 照搬 到 Drazin MERER. Z 
当 指 出 , 对 给 定 的 线性 算 子 A, 在 空间 C 中 建立 了 一 种 特 
VE BS ASER ZR e, 线性 算 子 A 及 其 Drazin i AP WEE IR, 
都 共有 非常 简单 的 结构 ， 从 而 使 Drazin 道 的 性 质变 得 十 分 
明显. 同时, 在 实际 应 用 中 , 常常 不 是 直接 应 用 抽象 的 线性 算 
子 ， 而 是 应 用 家 示 线性 算 子 的 矩阵 , 从 实际 应 用 的 角度 来 考 
JE "HEX XS PER Drazin 逆 作 进 一 步 的 研究 。 
1 和 -27 线性 算 子 在 其 不 变 子 空间 直接 和 上 的 矩阵 表示 


5 RNE V^ 中 取 两 组 坐标 基底 
pour ta 和 (Bj, 
游 设 线 "my A 在 这 两 个 坐标 系 中 的 矩阵 表示 分 别 ^ ATI 
B. 次 设 这 两 个 基 语 之 间 有 下 列 关系 : ' y. 
: jo v B,- Dv, Lap D oo 
i (0 Polip), Q= el. 22D 
IER PE AURI B LATARA: PRGOGn 
5 A-QBP, o.c Q8 

HL PAL QADHERS, H 

Q-P^ZgP-Q". .. .. Q9 


AW DI QS) ERR 4 
(AS PBP | 00 


B B-QUAQ. 00 77 0) 


不 难看 出 , $E BE P rR B 38 i SIRER. 上 就 是 向 量 a, 

dE HEAR (8) 中 的 坐标 向 量 ,而 Q 中 的 第 j 个 列 向 量 其 是 

有 ;在 坐标 系 lad 中 的 坐标 向 量 . f 

上 述 讨 论说 明 ， w PRESE STR 
矩阵 表示 互 为 相似 ， EGLI PMR MEREN EROR 

一 线性 算 子 在 不 同 坐标 系 中 的 表示 ， 
Kua kipus | 
-HON : (82) 
其 中 的 Wi 和 MM A STEFAR, m, 我 们 


AWCH a, AW scs. Uf (83) 
z dimi v, | (845 
则 
dim%,=x—. ` . (85) 
任 一 向 量 w C 6^ 都 可 以 唯一 地 表示 成 
=W +W, WE H, wE Wa, 0s 7: (96) 
今 定义 线性 算 子 A, ffi As in T. ovans Í 
A, = As, Ax = s Awi, AOAN (ST) 
于 是 显然 有 f A SAC 
At i= 4w E >, Aaw, Au,C W X m 
Ayw; — At — 6, 
从 而 , 线性 算 子 A 可 以 表示 成 线性 算 子 A 与 A, 之 和 ， 
A= A FAs, (89) 


5 jg- Az, 则 疝 量 BAARN SE gu 与 p, 之 和 


y-yitys, (40) 
其 中 


Yi = Ax = Áw, E *»^, Ya= Ax = Ate, € Wa, (41) 
”在 子 空间 ;3 和 ZZ, 中 分 别 取 基 底 
(pi, Ut 243 和 ipa Ut, Prts (42) 


{D1, c pu (43) 
便 构成 空间 E 的 一 个 基底 , 我 们 引进 下 询 坐 标 向 量 ， 
志和 为 表示 向 量 吧 和 2 在 基底 (43) 下 的 坐标 向 量 ; 
£O 和 £O 为 表示 向 量 tns 和 Ww 在 (42) 中 相应 基底 下 
的 坐标 向 量 ; 
Th F n IRRE Ya 和 8 在 (42) 中 相应 基底 下 的 
ARS IS] E; I | 
TE, £ü m gm Ze, £O, nO m HE, £9,9 Anr 
4, 并 且 有 下 列 关系 : | 
I nD 0, ray 
n= | Oae J+ gd ] =| 9g? | 
a ego 
¿=| A J M ]-i n ] 
其 中 的 O. M Onr AMD m HERI — r HERE hj Et. 
BRENT A ZE (42) 中 相应 基底 下 在 子 空间 i 和 
Ys 二 的 插 阵 表示 分 别 为 了 阶 方 阵 丽 :和 mw 一 上 阶 方 阵 矶 。 
记 线性 算 子 4 在 基底 (48) 下 在 空间 V" LERE RN n. 
BARA, 则 有 Te a 
"-A£-| we J-l W ] 


W, 0 (D 
-| 0 W, Jl io l. | (457 


TX, 
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由 此 可 知 


W, 0 
4=| 0 w, |. (46) 
如 果 这 同一 线性 算 子 4 在 另 一 基底 下 的 矩阵 表示 为 B, 
则 必 存 在 非 奇 异 w 阶 方 阵 卫 使 
a p[Wi 9 154. 
B-PAP -P| ñ w, I? 1 Gn 


4-9 iRbBSEubD- ERAS 
作为 前 一 小 节 中 空间 直接 和 分 解 的 特例 , 令 
X20, Yi- M (AS, . (48) 
在 这 里 我 们 假定 F—Ind(A), r-dimZé (A9, 373 2 3 
种 情形 的 特殊 性 ， 我 们 把 (46) PR n BTE Wa nr Bt 
方 阵 分 别 改 记 为 CO RUN. 于 是 (46) 就 变 成 ，- 
Q 0 
o xl 
公式 (49) 中 的 矩阵 4, O 和 N 具有 下 列 特性 : 
1° AA AZ CAS) = 22CAV), BrDJ EBE O35 dk ñ R r Ër 
方 阵 ; | 
— 9? HE 六 满足 关系 
N*—0 


A-| (49) 


Hj A*- 1x0. Í 
9° rank( A9 =rank( A**1) =r, 着 0<p<k, w. 
rank (4) >r, 
定义 6 设 4 是 一 个 给 定 前 方 阵 ， RIDERE 
rank(4*) = rank (At) 
的 最 小 非 负 整数 为 矩阵 4 的 指标 , 并 记 作 
b--1nd(A). 
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am 4x0, Ar?=0, 
m AS p CREAR PE, 
BA, 落 A 非 奇异 , 则 Ind (A) —0, 35 4 398 58, 则 
Ind(A)»i, | 
此 外 ,不 难 证 明 , 线性 算 子 4 及 其 在 任何 基底 下 的 矩阵 
表示 A, 有 共同 的 指标 , 即 恒 有 
Ind(A)=Ind(4), 
FHE EA Pu p at SEC, WJ AEDA p KERER, 
- 根据 前 述 讨论 , 我们 有 
定理 8 设 和 4 为 任 一 % 阶 方 阵 , Ind CA) =, rank (A) 
=r, 则 必 存 在 非 奇 异 的 m” 阶 方 阵 卫 和 了 阶 方 阵 G 以 及 mw 一 7 
阶 X UCRGE PEN die | 
we™. (50) 


附注 = h=0, MJ O Ang, BF N =O, 
公式 (50) 可 改写 成 


- 0 O4 ， 
POP| P^, (51) 


> 


定义 9 我 们 称 -04 为 矩阵 4 RDR, S NA 
Pk 4 的 等 零 部 分 , 而 称 (51) 为 矩阵 4 的 核心 - 短 零 分 解 

SEE EE AMORE RS 

4-4 和 矩阵 的 'Drázin E 

对 给 定 的 % KOREA A, 它 有 唯一 AURORA fg (51). 
id 
=ä8b— 


D. 7 c 0 )—1 
A -P| Q oJ (89) 

定义 8 我 们 称 (02) B; L zm BJ 4B EE AP O B BE 4 的 
Drazin ji 

n 阶 方 阵 4， 可 以 把 它 看 成 是 某 一 线性 算 子 4 在 空间 
v^ 的 标准 基底 (€x, ne, 08 下 的 矩阵 表示 , 而 (52) 所 定 
义 的 矩阵 AP 实际 上 就 是 线性 算 子 4 的 Drazin 3e A? # Jl 
一 空间 基底 下 的 和 矩阵 表示 ， 在 空间 基底 给 定 以 后 , w Er Tr BE 
和 从 V"—'£^ 的 线性 算 子 为 一 一 对 应 ， 这 就 是 说 , HE BJ 
Drazin 道 ， 根 据 线性 算 子 乘积 的 矩阵 支 示 等 于 各 习 子 和 抢 阵 
事 示 的 积 ， 以 及 在 给 定 坐 标 基 底 后 线性 算 子 和 矩阵 袁 示 的 唯一 
TE, $3 中 所 前 明 的 Drazin 逆 算 子 的 性 质 , 都 可 以 直接 照搬 
到 Drazin 道 和 矩阵 上 来 ， 在 本 节 中 记 引 选 的 矩阵 4 的 特殊 分 
解 (中 )， 使 相应 的 Drazin 道 和 矩阵 具有 特殊 的 结构 形式 ， 这 
对 验证 Drazin 道 矩 阵 的 性 质 带 来 了 很 多 方便 .例如 ， 


saec oo elis o 
ML 

sas ls ollo a] 
-Ho oo 


如 此 等 等 。 今 再 列举 一 些 关 于 Drazin WE BJ EEF TF, 
请 读者 试 证 之 ， 
1° Ind(4?) = Ind(04) = í: # Ind(4) 21, 


0, 2; Ina (A) =0, 


— FT 一 


223? NO ,-—O04N = 0.: 
(s Nad?= APN 1-0, 
4? OAA?” — A ATO, =C, 
5° A=Ca, 必须 且 只 需 Ind CA) «1, 
6° (A?)?—Q,. 
TP ((AP)2)P — AP. 
8° AP=0}, 
9° (AP)*= (A*)D, . 
10° X€ oC), I:TELA SE A* Co (D), 
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附录 2 
关于 广义 道 乘 积 公式 证 明 的 补充 
为 了 证 明 第 2 章 5 和 市 的 条 件 (ii Gv) ERI, IX 


逆 的 乘积 公式 成 立 , 我们 先 证 明 . 
8138 设 À ft G ARI m x RE n< m Nš BE. &- Dl 


G.A -—A*A, AG — AA*, DUE 
H Cav. TL 
rauk(G)sirank(A), i 
则 必 有 "lE QU 
. @—= At i 


证 明 因为 G.A-- At A, t AI AGA= A. Lr 
G= At, RREH GAG-G 就 行 了 . - 
因为 rank(G) «rank( A) = rank( AGA) rina), 
而 rank(G) zerank(G A) , O f 
rank(G) —rank(GA), ..: 


从 而 便 知 
A) — 2 (G4), 
出 此 可 知 ， IRE nxm MERO, 使 . 


zd oua 


G-GAO, ^ — 2 ea ata 
两 端 分 别 乘 以 G4, E o Uem i 
GAG-GAGAO-GAO-G, su 
mmmn o DIC 


已 知 
B*A* — B*BB* A3 AA* = A*BP(B* A5) AS AS, 
Bi EI rank (B* A*) «rank ( B* A*) e renk( 4B), Am (531) 


和 (iv) 便 证 明了 乘积 公式 MEME 
(AB) BhA S assu 
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